EL ROBOT DE GOOGLE.
Googlebot se encarga de analizar páginas de Internet, recolectando a su vez información para la base de datos.Tiene dos interpretaciones que se encargan de abordar distintas tareas: deepbot inspecciona en profundidad cada página, la compone el caché y sigue los enlaces comprendidos en ella reconociendo nuevas páginas; y freshbot se encarga de revisar webs ya indexadas en busca de actualizaciones. Cuando freshbot localiza cambios o nuevos contenidos lo comunica a deepbot agregando la página a su lista de descargas pendientes.
No hay comentarios:
Publicar un comentario