SEO et marketing

Générateur de robots.txt — Règles d’exploration

Créez un robots.txt de base avec des règles d'agent utilisateur, d'autorisation, d'interdiction et de plan de site. Utile pour la configuration de la politique d'analyse au moment du lancement.

Accès rapide→Générateur de plan de site

robots.txtSEORobots d’indexation

Accès rapide:Générateur de plan de site Générateur de balises méta

Ajouter cet outil aux favoris

Aucun mode de stockage des favoris n’a été sélectionné.

Actions rapides

Retour à SEO et marketing Parcourir tous les outils

Copiez l’URL de cet outil ou ouvrez la feuille de partage du système sur un appareil compatible.

Cas d’usage

Écrire un démarreur robots.txt pour un nouveau site
Bloquer les robots d'exploration des chemins d'administration ou de brouillon
Déclarer une URL de plan de site dans robots.txt

Mode d’emploi

Entrez l'agent utilisateur et les chemins d'autorisation/interdiction
Ajoutez une URL de plan de site si nécessaire
Copier le texte de sortie

Exemples d’entrée et de sortie

Entrée

User-agent: * / Disallow: /admin / Sitemap: https://uuup.net/sitemap.xml

Sortie

Texte robots.txt

FAQ

Puis-je ajouter plusieurs règles d'interdiction ?

Oui. Entrez un chemin par ligne pour générer rapidement plusieurs règles d'interdiction.

Le robots.txt contrôle-t-il l'accès ?

Non. Il est conseillé aux robots d'exploration bien élevés et ne remplace pas l'authentification ou les autorisations.

Outils

Outils associés

Poursuivez avec un autre outil traduit pour une tâche proche.

Générateur de plan de site

sitemap.xml Générateur - Plan de site de liste d'URL

Disponible

Transformez une liste d’URL sur plusieurs lignes en un sitemap.xml de base. Cet outil est utile aux petits sites qui préparent un inventaire de pages pour les moteurs de recherche. Le traitement reste dans votre navigateur.

Plan du site SEO XML

Ouvrir l’outil

Générateur de balises méta

Générateur de balises méta - SEO de base et Open Graph