Crawler

Wat is Crawler?

Een programma dat automatisch websites langsgaat en de pagina's leest.

Ook bekend als: crawl, crawlen, gecrawlde, gecrawld, crawlers

CrawlerEen programma gaat automatisch van pagina naar pagina en leest ze.leest pagina’s

ZoekmachinesZoekmachine Een website waarmee je het internet doorzoekt, zoals Google of Bing. en AI-bedrijven gebruiken crawlers om het internet in kaart te brengen. Een sitebrede crawl betekent dat alle pagina’s van een site zijn nagelopen.