Générateur de robots.txt pour Shopify
Créez un robots.txt qui conserve les règles de Shopify et ajoute les vôtres.
Pages Shopify
Bloquer les pages de collections filtrées
Les URL comme /collections/chemises?filter.v.size=M. Elles dupliquent la collection et gaspillent le budget d'exploration.
Bloquer les pages de fournisseurs et de types
Les pages /collections/vendors et /collections/types créées par défaut par Shopify, qui ont rarement un intérêt pour le référencement.
Robots d'IA
Bloquer les robots d'entraînement de l'IA
GPTBot, ClaudeBot, Google-Extended, CCBot et les autres robots qui parcourent les pages pour entraîner leurs modèles.
Bloquer les moteurs de recherche IA et assistants
OAI-SearchBot, PerplexityBot et les autres robots qui explorent vos pages pour répondre aux acheteurs. Il est généralement préférable de les autoriser.
Vos propres règles
Généré dans votre navigateur. Les règles natives de Shopify restent en place.
Votre fichier robots.txt.liquid
Règles de Shopify plus 2 règles personnalisées
- 1Dans l'interface administrateur Shopify, accédez à Boutique en ligne, Thèmes, puis cliquez sur Modifier le code de votre thème actif.
- 2Sous Modèles, cliquez sur Ajouter un nouveau modèle, sélectionnez robots.txt, puis validez sa création.
- 3Remplacez son contenu par le code ci-dessus et enregistrez. Vérifiez votreboutique.com/robots.txt une minute plus tard.
Comparer avec le robots.txt actuel d'une boutique
Chargez le robots.txt actuellement diffusé par une boutique pour vérifier ce qui est déjà bloqué avant de le remplacer.
Comment créer un fichier robots.txt pour Shopify
- 1
Choisissez vos règles
Bloquez les pages filtrées, les robots d'IA ou des URL précises, et ajoutez d'autres sitemaps.
- 2
Copiez le modèle
Obtenez un fichier robots.txt.liquid qui conserve les règles Shopify et ajoute uniquement les vôtres.
- 3
Ajoutez-le à votre thème
Créez le modèle robots.txt dans l'éditeur de code de votre thème, collez et enregistrez.
Ce que contient ce générateur de robots.txt
Définissez les accès à bloquer, des pages de collection filtrées aux robots d'entraînement d'IA, et obtenez un fichier robots.txt.liquid prêt à coller dans votre thème. Il conserve les règles par défaut de Shopify, mises à jour automatiquement, et ajoute les vôtres par-dessus. Une version robots.txt standard est aussi incluse pour les autres plateformes.
- Conserve les règles par défaut, mises à jour par Shopify
- Bloque les URL de collections filtrées et par fournisseur
- Bloque séparément l'entraînement d'IA et la recherche par IA
- Charge le robots.txt actuel d'une boutique pour comparer
Comment lire le fichier robots.txt généré
Un rapport impossible à interpréter n'est qu'une manière plus longue de vous dire que quelque chose ne va pas.
Le modèle Liquid
Shopify génère le robots.txt depuis un modèle. Conserver les groupes par défaut permet de garder chaque règle ajoutée ultérieurement par Shopify, tout en appliquant les vôtres.
Règles pour tous les robots
Lignes Disallow ajoutées au groupe commun (User-agent: *). Les chemins peuvent utiliser le caractère générique *.
Groupes de robots d'IA
Chaque robot d'IA bloqué dispose de son propre groupe avec Disallow: /. L'entraînement et la recherche sont séparés, car bloquer la recherche vous exclut aussi des réponses de l'IA.
Votre fichier actuel
Chargez le robots.txt en ligne de n'importe quelle boutique pour vérifier s'il bloque tout, indique un sitemap ou bloque déjà les robots d'IA.
Le mécanisme technique, pas des généralités.
- 01
Les filtres multiplient les pages
Chaque combinaison de couleur, taille et prix crée une nouvelle URL que Google doit explorer. Sur un grand catalogue, cela pénalise les pages prioritaires.
- 02
Les robots d'IA sont désormais un choix
Les robots d'entraînement exploitent vos fiches produits pour leurs modèles, tandis que les moteurs d'IA vous apportent des acheteurs. Le fichier robots.txt vous permet de gérer chacun séparément.
- 03
Modifier le fichier Shopify présente des risques
Remplacer le modèle par du texte brut supprime les règles de base de Shopify et leurs futures mises à jour. Compléter le modèle existant reste la méthode sûre.
Erreurs fréquentes dans le robots.txt sur Shopify
Quatre problèmes qui représentent l'essentiel de ce que cet outil détecte sur une boutique Shopify.
Le problème
Toute la boutique est bloquée
Pourquoi cela arrive
Une règle Disallow: / oubliée avant le lancement, ou une boutique protégée par mot de passe.
La solution
Supprimez la règle et désactivez le mot de passe dans Boutique en ligne, Préférences.
Le problème
Règles Shopify absentes
Pourquoi cela arrive
Le modèle a été écrasé par du texte brut au lieu d'être complété.
La solution
Repartez du modèle de ce générateur pour réintégrer les groupes par défaut.
Le problème
Des pages bloquées restent dans Google
Pourquoi cela arrive
Le fichier robots.txt bloque l'exploration, pas l'indexation. Les pages déjà connues peuvent rester affichées.
La solution
Utilisez une balise noindex pour retirer des pages des résultats de recherche, et laissez-les explorables jusqu'à leur désindexation.
Ce que ce générateur de robots.txt ne peut pas faire
Chaque outil a son périmètre. Savoir où s'arrête celui-ci vous évite de surinterpréter ses résultats.
- Le robots.txt est une directive indicative. Les robots respectueux la suivent, d'autres l'ignorent, et elle ne permet pas de masquer des pages privées.
- Il contrôle l'exploration, pas l'indexation. Pour retirer une page des résultats de recherche, utilisez noindex.
D'autres outils gratuits.
Tous les outils- Vérificateur de sitemapTrouvez un sitemap et vérifiez son contenu.
- Générateur llms.txtIndiquez aux assistants IA ce que vend votre boutique.
- Vérificateur de redirections 301Suivez chaque saut, détectez chaque chaîne.
- Détecteur de thème ShopifyDécouvrez le thème et les applications utilisés par n’importe quelle boutique Shopify.
Automatisez plutôt cette surveillance en continu.
Installez ShopSEO gratuitement, lancez votre premier audit en moins d'une minute et revenez en arrière sur tout ce qui ne vous plaît pas. Sans carte bancaire, sans modifier votre thème, sans engagement.