Crawling

El proceso de recopilar información, mediante un rastreador, de los miles de millones de páginas web públicas para actualizar, agregar y organizar páginas web en el índice de un motor de búsqueda.