Een Crawler (ook wel bot of spider genoemd) is een soort scanner van een zoekmachine die continu het internet afspeurt om webpagina’s te indexeren. Dit om nieuwe pagina’s te vinden of om wijzigingen van bestaande pagina’s te ontdekken. Al deze informatie wordt vervolgens opgeslagen in de database of index van de zoekmachine.
Door de site te te blijven gebruiken, gaat u akkoord met het gebruik van cookies en onze privacyverklaring. Meer informatie.
De cookie-instellingen op deze website zijn ingesteld op 'toestaan cookies "om u de beste surfervaring mogelijk. Als u doorgaat met deze website te gebruiken zonder het wijzigen van uw cookie-instellingen of u klikt op "Accepteren" hieronder dan bent u akkoord met deze instellingen.
