HerkeurBot: wat doet deze bot op mijn website?
U ziet HerkeurBot in uw logbestanden. Dat betekent dat iemand uw website laat controleren op technische fouten en inconsistente bedrijfsgegevens, zoals kapotte links, verschillende telefoonnummers of een ontbrekend formulier in een vertaling.
Alleen met toestemming. Herkeur scant een website pas als de klant heeft aangetoond eigenaar te zijn, met een meta-tag op de homepage, een bestand op /.well-known/herkeur-verification.txt of een DNS-record herkeur-verification=…. Ziet u de bot zonder dat u dat herkent, neem dan contact op: info@herkeur.nl.
Wat de bot doet
- Leest robots.txt en volgt de regels voor
HerkeurBoten*. - Doet alleen lees-verzoeken (GET, en HEAD om links te controleren), vult geen formulieren in en logt nergens in. JavaScript wordt alleen uitgevoerd als de eigenaar van de site dat voor die site heeft aangezet; ook dan gaat al het verkeer via dezelfde beperkingen.
- Beperkt tempo: hooguit 3 gelijktijdige verzoeken naar uw site (standaard), een vaste bovengrens aan pagina's per scan, en stopt na een tijdslimiet.
- Slaat WordPress-beheer en vergelijkbare paden standaard over.
- Bewaart geen volledige pagina's, alleen korte fragmenten als bewijs bij een gevonden fout.
De bot weren? Zet in robots.txt:
User-agent: HerkeurBot
Disallow: /
Dat werkt direct bij de volgende scan. Een geblokkeerde site wordt in het rapport van de klant gemeld als "overgeslagen door robots.txt".