Terug naar Gratis Tools

Robots.txt Checker

SEOptimers Robots.txt Checker controleert of je website een robots.txt-bestand heeft geconfigureerd, zodat je de toegang van zoekmachinecrawlers tot je site kunt beheren.

Wat het is

Robots.txt is een tekstbestand dat instructies geeft aan zoekmachinecrawlers over hoe ze uw site moeten crawlen, inclusief welke soorten pagina's wel of niet toegankelijk zijn. Het is vaak de poortwachter van uw site en meestal het eerste dat een zoekmachinebot zal benaderen.

Hoe het te verhelpen

We raden aan om altijd een robots-bestand voor uw site te hebben. Deze kunnen automatisch worden aangemaakt met behulp van een gratis online hulpprogramma, Wordpress-plugin of het robots.txt-aanmaakproces van uw CMS.

SEOptimer - SEO Audit & Rapportagetool. Verbeter uw website. Win meer klanten.

Krijg direct een gratis website-audit

Meer informatie