ZoekmachinesZoekmachine Een website waarmee je het internet doorzoekt, zoals Google of Bing. en AI-bedrijven gebruiken crawlers om het internet in kaart te brengen. Een sitebrede crawl betekent dat alle pagina’s van een site zijn nagelopen.
Ook bekend als: crawl, crawlen, gecrawlde, gecrawld, crawlers
