Crawling

Crawling bezeichnet den Prozess, bei dem Suchmaschinen-Bots das Internet durchsuchen, um neue oder aktualisierte Seiten zu finden. Diese Seiten werden analysiert und anschließend in den Suchindex aufgenommen.