Webcrawler
Wabcrawler, een applicatie die webpagina's ophaalt vanaf webservers en deze na een aantal bewerkingen plaatst in de index van een zoeksysteem waardoor deze door gebruikers gevonden kunnen worden. De crawler vindt pagina's door het volgen van hyperlinks naar andere webpagina's.