Er zijn twee soorten crawlfouten:
Sitefouten: Deze treden op wanneer een zoekmachine geen toegang krijgt tot je hele website. Dit kan komen door serverproblemen, DNS-fouten of een verkeerd geconfigureerd robots.txt-bestand.
URL-fouten: Deze fouten doen zich voor bij specifieke pagina’s. Denk aan 404-fouten door gebroken links, time-outs door een trage serverreactietijd of een geblokkeerde URL in het robots.txt-bestand.
Beide soorten crawlfouten kunnen ervoor zorgen dat zoekmachines je content niet indexeren, wat je zichtbaarheid en SEO kan schaden.
