Foros del web, para los que viven de bits

Hola. Queria haceros una consulta que siempre he tenido en mente. Ya os digo que la pregunta la hago por lo que yo he visto, bajo mi experiencia. Queria saber por qué, a priori, Google, por ejemplo, tarda más en indexar una carpeta que un archivo html. Es decir, me explico, por qué Google indexa antes un:

midominio/archivo.html

Que un:

midominio/archivo/index.html

Según mi experiencia, ya os digo, siempre me a indexado mucho antes un archivo en la raiz que un archivo dentro de una carpeta, y solo queria saber si esto es asi siempre, si depende de alguna cosa, o no sé ...

Por orden de importancia.
Se supone que midominio/archivo.html tendrá mas relevancia que midominio/archivo/index.html. Y en la mayoría de casos el segundo es una derivación del primero. Quiero decir, para mostrar midominio/archivo/index.html es necesario tener indexado midominio/archivo.htm primero.

No creo que google le de importancia a la posicion que ocupe una pagina dentro de los directorios, aunque es posible que una vez indexada una web las ordene de esa forma por sus urls, nadie lo sabe a no ser que trabaje para google.

Si te puedo asegurar que google indexa todo lo que encuentra en tu pagina web, y no presta atencion a que este dentro de una carpeta, si todo el contenido de tu pagina web lo colocas dentro de la carpeta contenido/, google encontrara esos enlaces y los indexara al igual que si estuvieran en la raiz.

Lo que puede que te haya pasado es que por la forma de tu pagina google haya ido buscando y logicamente se haya topado primeramente con los enlaces hacia paginas que estaban en la raiz de tu dominio, y despues una vez ha ido profundizando con el tiempo ha ido indexando las subpaginas que cuelgan de las primeras dentro de carpetas.

Pero eso no quiere decir que le de mas importancia a un html que cuelgue de una carpeta que a uno que cuelgue de la raiz de tu web, por lo menos desde mi punto de vista.

Se indexara antes lo que google encuentre antes. Y una vez indexado google ya valorara la importancia de cada html por separado y lo posicionara donde el crea conveniente.

Pues los Page Rank siempre son superiores y comienzan a otorgarse en el dominio raiz y luego en las sub paginas, tambien cuando recien comienzas se ve indexada la home y luego las demas...

por tanto es obvia la respuesta.

A mi me da la sensacion de que google va haciendo pasadas. Y digo me da la sensacion, porque aunque en la aplicacion para webmasters de google te diga por ejemplo que tu pagina se indexo por ultima vez el 12 de marzo si te fijas en las estadisticas diarias de google, googlebot se pasa practicamente por tu web todos los dias, o varias veces a la semana, y algunos dias apenas entra al archivo raiz y ya, otros dias sin embargo penetra mas a fondo en los directoriios y tal. Yo creo que esto influye luego y lo que tu comentas, pero la realidad es que en poco tiempo ya tienes toda tu web indexada.
Saludos.

Obviamente googlebot pasa mas de una vez explorando si hubo o no cambios y tiene designado diferentes actividades a veces solo explorar el home y otras explorar todo, pero se guia por los cambios que hay. La primera que toma es la raiz, en nuestro caso se ven 24 o 48 hs de publicada ya en google y luego a las 24 o 48 hs nuevamente ya 10 paginas mas y asi hasta tomar toda la web. En las paginas que tienen mas actividad en 24hs ya aparecen los nuevos agregados.
Si miras post nuevos de foros del web y buscas en google veras que estan ahi en 24hs, en un foro como este googlebot pasa todos los dias y casi todo el dia aca adentro.