Crawlen

Het proces waarbij zoekmachines webpagina’s ontdekken en indexeren door de inhoud en links van de pagina’s te lezen en te analyseren met behulp van webcrawlers.