Cuando hace tiempo se comentó que algunas páginas webs mostraban contenido restringido a Google para que sea indexado, se han extremado bastante las "precauciones". Aquí una detallada lista de todos (sin dejarse ninguno en el tintero) los métodos para hacerse pasar por Googlebot. Ojo, cloacking ;-)
Comentarios
relacionado: Extensión de Firefox para acceder gratis a muchos sitios de pago
Extensión de Firefox para acceder gratis a muchos ...
addons.mozilla.orgjajaja es bueno, y lo he estado probando un rato y funciona. Aunque el artículo no lo explica demasiado bien.