Shopify robots.txt-generator
Byg en robots.txt, der bevarer Shopifys regler og tilføjer dine egne.
Tre trin, ingen konto.
- 1
Vælg dine regler
Bloker filtrerede sider, AI-crawlere eller enhver sti, du angiver, og tilføj ekstra sitemaps.
- 2
Kopier skabelonen
Få en robots.txt.liquid, der bevarer Shopifys standardindstillinger og kun tilføjer dine regler.
- 3
Tilføj den til dit tema
Opret robots.txt-skabelonen i dit temas kodeeditor, indsæt koden, og gem.
Det tjekker værktøjet
Vælg, hvad crawlere skal holdes væk fra, lige fra filtrerede kollektionssider til AI-træningsbots, og få en robots.txt.liquid klar til at indsætte i dit tema. Den bevarer Shopifys standardregler, som Shopify opdaterer for dig, og tilføjer dine egne oveni. En ren robots.txt-version medfølger til sites på andre platforme.
- Bevarer Shopifys standardregler, opdateret af Shopify
- Blokerer filtrerede kollektions-URL'er og leverandørsider
- Blokerer AI-træning eller AI-søgecrawlere separat
- Indlæser en butiks nuværende robots.txt til sammenligning
Hvad hvert tal betyder.
En rapport, du ikke kan tyde, er bare en omstændelig måde at sige, at noget er galt.
Liquid-skabelonen
Shopify bygger robots.txt ud fra en skabelon. Ved at bevare standardgrupperne beholder du alle regler, Shopify tilføjer fremover, mens dine egne regler lægges oveni.
Regler for alle crawlere
Disallow-linjer tilføjet til gruppen for alle crawlere (User-agent: *). Stier kan bruge * som jokertegn.
Grupper til AI-crawlere
Hver blokeret AI-crawler får sin egen gruppe med Disallow: /. Trænings- og søgecrawlere adskilles, da blokering af søgning også skjuler dig i AI-svar.
Din nuværende fil
Indlæs enhver butiks aktive robots.txt for at se, om den blokerer alt, angiver et sitemap eller allerede blokerer AI-crawlere.
Mekanikken bag, uden floskler.
- 01
Filtre mangedobler dine sider
Hver kombination af farve, størrelse og pris skaber en ny URL for Google. I et stort varekatalog kan det overskygge de sider, du faktisk ønsker fundet.
- 02
AI-crawlere er et aktivt valg
Træningscrawlere henter dine produkttekster til modeller, mens søgecrawlere sender kunder videre fra AI-svar. Med robots.txt kan du vælge til og fra.
- 03
Shopifys fil kan let redigeres forkert
Hvis du erstatter skabelonen med ren tekst, mister du Shopifys regler og deres fremtidige opdateringer. At bygge videre på den er den sikre vej.
Hvad analysen typisk finder, og løsningen.
Fire problemer, der dækker størstedelen af det, værktøjet finder i en Shopify-butik.
Problemet
Hele butikken er blokeret
Hvorfor det sker
En efterladt Disallow: / fra før lancering eller en adgangskodebeskyttet butik.
Løsningen
Fjern reglen, og slå butikkens adgangskode fra under Webshop, Præferencer.
Problemet
Shopifys standarder mangler
Hvorfor det sker
Skabelonen blev erstattet med ren tekst i stedet for at bygge videre på den.
Løsningen
Tag udgangspunkt i denne generators skabelon, så standardgrupperne vender tilbage.
Problemet
Blokerede sider vises stadig på Google
Hvorfor det sker
robots.txt forhindrer crawling, ikke indeksering. Sider, Google allerede kender, kan forblive synlige.
Løsningen
Brug et noindex-tag på sider, der skal ud af søgeresultaterne, og hold dem crawlable, indtil de forsvinder.
Hvad værktøjet ikke fortæller dig.
Ethvert værktøj har grænser. Når du kender dem, undgår du at overfortolke tallene.
- robots.txt er en henstilling. Velopdragne crawlere følger den, andre gør ikke, og den kan ikke bruges til at skjule private sider.
- Den styrer crawling, ikke indeksering. Brug noindex for at fjerne en side fra søgeresultaterne.
Flere gratis værktøjer.
Alle værktøjerKør dette automatisk i stedet.
Installer ShopSEO gratis, kør dit første tjek på under et minut, og rul alt tilbage, du ikke bryder dig om. Intet kreditkort, ingen ændringer i temaet og ingen binding.