Hace 17 años | Por nedial a nedial.net
Publicado hace 17 años por nedial a nedial.net

Según leo en Google Blogoscoped, parece que Google está indexando sus propios resultados de búsqueda, a pesar de que lo tienen desactivado en su robots.txt (Disallow: /search)

Comentarios

PaNtaN

#0 "¿Se indexa Google a si mismo?" Desde siempre!

Creo que un titular correcto sería: ¿Indexa Google sus propios resultados?

Además me parece que la noticia es errónea, yo no veo que indexe demasiado, más bien poquito y nada, ni siquiera tiene caché de las páginas que muestra. Exactamente igual que las páginas de mis sitios que le indico que no indexe.

nedial

Tienes razón, me mola más ese título

Pero... la cuestión que se trata aquí es que está indexando páginas contradiciendo a su propio robots.txt