ChatGPT vs Gemini: co povolit v robots.txt
Lidsky: které boty v robots.txt ovlivní, jestli vás ChatGPT a Gemini vůbec „uvidí“, a co u vás konkrétně změnit.
Když někdo v ChatGPT nebo Gemini hledá doporučení e-shopu, AI často sahá po veřejném webu. Nejdřív ale musí mít povolení procházet váš obsah — a to řídí soubor robots.txt na kořeni webu.
Nejde o jeden „AI bot“. OpenAI i Google mají různé tokeny. Když některý zakážete, může to vypnout trénování, citace, nebo živé načtení stránky — podle toho, co přesně blokujete.
ChatGPT (OpenAI)
- GPTBot — crawler pro trénování modelů OpenAI.
- OAI-SearchBot — indexace pro vyhledávání / citace v ChatGPT Search.
- ChatGPT-User — načtení stránky, když uživatel v chatu požádá o konkrétní URL (nejde o klasický crawl).
Pro viditelnost v ChatGPT typicky chcete alespoň Allow pro GPTBot a ChatGPT-User. OAI-SearchBot řešte zvlášť, pokud chcete být v ChatGPT Search.
Gemini (Google)
U Google je klíčový token Google-Extended. Řídí, jestli se obsah může použít pro Gemini (trénování / grounding). Neovlivňuje klasické pořadí ve výsledcích Google Search.
Souhrn změn u vás
- Otevřete
https://váš-web.cz/robots.txt. - Odstraňte
Disallow: /u GPTBot, ChatGPT-User a Google-Extended (pokud je tam máte). - Přidejte výslovné Allow bloky (viz níže).
- Uložte a počkejte — u OpenAI Search se změny mohou projevit řádově do ~24 hodin.
- V e-majak spusťte audit s režimem GEO a ověřte tipy.
User-agent: GPTBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: Google-Extended Allow: /
Citace
Robots.txt nastavte správně proto, aby vás ChatGPT a Gemini vůbec mohly najít.