cincinatti, sé que sabes bien de lo que hablas, no me quiero meter en una discusión contigo.
Sobre que la IP no influye en el posicionamiento, entiendo que estamos de acuerdo (y si no es así, remíteme a tus fuentes y/o pruebas).
Sobre la velocidad del servidor, de todos los factores que pueden influir, en mi experiencia es el último que habría que mirar, y la influencia a la hora de servir una página web puede ser medible técnicamente (en ms) pero no apreciable para el usuario.
¿O no es más importante el servidor, su configuración, su conectividad, la velocidad de los discos, la RAM, la CPU, los sistemas de caché, si está sobrecargado de usuarios o no, etc?