Générateur de robots.txt pour Shopify
Créez un robots.txt qui conserve les règles de Shopify et ajoute les vôtres.
Trois étapes, sans créer de compte.
- 1
Choisissez vos règles
Bloquez les pages filtrées, les robots d'IA ou des URL précises, et ajoutez d'autres sitemaps.
- 2
Copiez le modèle
Obtenez un fichier robots.txt.liquid qui conserve les règles Shopify et ajoute uniquement les vôtres.
- 3
Ajoutez-le à votre thème
Créez le modèle robots.txt dans l'éditeur de code de votre thème, collez et enregistrez.
Ce qu'il vérifie
Définissez les accès à bloquer, des pages de collection filtrées aux robots d'entraînement d'IA, et obtenez un fichier robots.txt.liquid prêt à coller dans votre thème. Il conserve les règles par défaut de Shopify, mises à jour automatiquement, et ajoute les vôtres par-dessus. Une version robots.txt standard est aussi incluse pour les autres plateformes.
- Conserve les règles par défaut, mises à jour par Shopify
- Bloque les URL de collections filtrées et par fournisseur
- Bloque séparément l'entraînement d'IA et la recherche par IA
- Charge le robots.txt actuel d'une boutique pour comparer
Ce que chaque chiffre vous indique.
Un rapport impossible à interpréter n'est qu'une manière plus longue de vous dire que quelque chose ne va pas.
Le modèle Liquid
Shopify génère le robots.txt depuis un modèle. Conserver les groupes par défaut permet de garder chaque règle ajoutée ultérieurement par Shopify, tout en appliquant les vôtres.
Règles pour tous les robots
Lignes Disallow ajoutées au groupe commun (User-agent: *). Les chemins peuvent utiliser le caractère générique *.
Groupes de robots d'IA
Chaque robot d'IA bloqué dispose de son propre groupe avec Disallow: /. L'entraînement et la recherche sont séparés, car bloquer la recherche vous exclut aussi des réponses de l'IA.
Votre fichier actuel
Chargez le robots.txt en ligne de n'importe quelle boutique pour vérifier s'il bloque tout, indique un sitemap ou bloque déjà les robots d'IA.
Le mécanisme technique, pas des généralités.
- 01
Les filtres multiplient les pages
Chaque combinaison de couleur, taille et prix crée une nouvelle URL que Google doit explorer. Sur un grand catalogue, cela pénalise les pages prioritaires.
- 02
Les robots d'IA sont désormais un choix
Les robots d'entraînement exploitent vos fiches produits pour leurs modèles, tandis que les moteurs d'IA vous apportent des acheteurs. Le fichier robots.txt vous permet de gérer chacun séparément.
- 03
Modifier le fichier Shopify présente des risques
Remplacer le modèle par du texte brut supprime les règles de base de Shopify et leurs futures mises à jour. Compléter le modèle existant reste la méthode sûre.
Ce qui ressort souvent, et comment le corriger.
Quatre problèmes qui représentent l'essentiel de ce que cet outil détecte sur une boutique Shopify.
Le problème
Toute la boutique est bloquée
Pourquoi cela arrive
Une règle Disallow: / oubliée avant le lancement, ou une boutique protégée par mot de passe.
La solution
Supprimez la règle et désactivez le mot de passe dans Boutique en ligne, Préférences.
Le problème
Règles Shopify absentes
Pourquoi cela arrive
Le modèle a été écrasé par du texte brut au lieu d'être complété.
La solution
Repartez du modèle de ce générateur pour réintégrer les groupes par défaut.
Le problème
Des pages bloquées restent dans Google
Pourquoi cela arrive
Le fichier robots.txt bloque l'exploration, pas l'indexation. Les pages déjà connues peuvent rester affichées.
La solution
Utilisez une balise noindex pour retirer des pages des résultats de recherche, et laissez-les explorables jusqu'à leur désindexation.
Ce que cet outil ne vous dira pas.
Chaque outil a son périmètre. Savoir où s'arrête celui-ci vous évite de surinterpréter ses résultats.
- Le robots.txt est une directive indicative. Les robots respectueux la suivent, d'autres l'ignorent, et elle ne permet pas de masquer des pages privées.
- Il contrôle l'exploration, pas l'indexation. Pour retirer une page des résultats de recherche, utilisez noindex.
D'autres outils gratuits.
Tous les outils- Générateur llms.txtIndiquez aux assistants IA ce que vend votre boutique.
- Vérificateur de redirections 301Suivez chaque saut, détectez chaque chaîne.
- Vérificateur de balises métaConsultez le titre et la méta-description d'une page, à la longueur affichée par Google.
- Détecteur de thème ShopifyDécouvrez le thème et les applications utilisés par n’importe quelle boutique Shopify.
Automatisez plutôt cette surveillance en continu.
Installez ShopSEO gratuitement, lancez votre premier audit en moins d'une minute et revenez en arrière sur tout ce qui ne vous plaît pas. Sans carte bancaire, sans modifier votre thème, sans engagement.