Retour aux outils gratuits

Générateur gratuit de fichiers Robots.txt

Le générateur gratuit de fichiers robots.txt vous permet de produire facilement un fichier robots.txt pour votre site Web en fonction des entrées.

robots.txt est un fichier qui peut être placé dans le dossier racine de votre site Web pour aider les moteurs de recherche à indexer votre site de manière plus appropriée. Les moteurs de recherche tels que Google utilisent des crawlers de sites Web, ou robots, qui examinent tout le contenu de votre site Web. Il peut y avoir des parties de votre site Web que vous ne voulez pas qu'ils explorent pour les inclure dans les résultats de recherche des utilisateurs, comme la page d'administration. Vous pouvez ajouter ces pages au fichier pour qu'elles soient explicitement ignorées. Les fichiers Robots.txt utilisent quelque chose appelé le protocole d'exclusion des robots. Ce site Web générera facilement le fichier pour vous avec les entrées des pages à exclure.


Par défaut - Tous les robots sont:

Crawl-Delay:

Sitemap:

Robots de recherche:


Google

Google Image

Google Mobile

MSN Search

Yahoo

Yahoo MM

Yahoo Blogs

Ask/Teoma

GigaBlast

DMOZ Checker

Nutch

Alexa/Wayback

Baidu

Naver

MSN PicSearch

Répertoires restreints:
Le chemin est relatif à la racine et doit contenir une barre oblique de fin de ligne "/".












SEOptimer Report Preview

SEOptimer - Outil d'Audit et de Rapports SEO
Améliorez votre site Web. Gagnez plus de clients.

Obtenez immédiatement un audit gratuit de votre site Web