Google-Extended

Google-Extended je speciální případ mezi AI boty, který většina SEO článků nesprávně popisuje jako crawler. Není to crawler. Sám Google ve své dokumentaci píše: „Google-Extended nemá samostatný HTTP user-agent string. Crawling probíhá existujícími Google user-agenty; robots.txt token se používá v řídicí roli.“ To znamená, že v serverových lozích Google-Extended nikdy neuvidíte — nikdy neprovádí vlastní HTTP požadavky. Je to čistě direktiva v robots.txt.

Jak to funguje prakticky: Googlebot (klasický vyhledávací crawler) stahuje váš obsah pro Google Search. Když ho stáhne, Google se dívá do vašeho robots.txt, jestli máte direktivu User-agent: Google-Extended Disallow: /. Pokud ano, Google stažený obsah nepoužije pro trénink Gemini, ale pořád ho použije pro Google Search. Pokud direktivu nemáte nebo je Allow, Google obsah použije pro obojí. Googlebot v obou případech chodí stejně.

To vytváří nejčistší opt-out mechanismus v celém AI ekosystému: můžete zablokovat Google-Extended bez jakéhokoliv negativního dopadu na Google Search rankingy, AI Overviews v Google Search, ani žádnou jinou Google viditelnost. Google to explicitně potvrzuje. Ekvivalentní mechanismus existuje u Apple (Applebot-Extended) — tam funguje identicky s Applebotem.

Google-Extended specificky ovlivňuje tréninková data pro Gemini Apps (dříve Bard), Vertex AI generative APIs a grounding v Gemini produktech. Změna názvu Bard → Gemini proběhla v roce 2024 a Google při té příležitosti dokumentaci Google-Extended aktualizoval, aby zdůraznil oddělení od Google Search. Pozor ale na jednu věc: Google-Extended neřídí, jestli vás Gemini zmíní v odpovědích grounded na real-time search — to dělá samotný Googlebot přes AI Overviews a AI Mode funkce.

Co se stane, když Google-Extended zablokujete

Pokud v robots.txt uvedete User-agent: Google-Extended / Disallow: /, Google přestane váš obsah používat pro trénink Gemini modelů a Vertex AI generative APIs. Všechen obsah, který Googlebot v budoucnu stáhne, bude i nadále indexován pro Google Search — ale nebude se přidávat do tréninkových datasetů. Obsah, který už je v tréninkových datech starších modelů Gemini, se zpětně neodstraňuje.

Co blokace NEovlivní (toto je důležité):

• Google Search rankingy a pozice — nulový dopad
• AI Overviews v Google Search — Gemini v AI Overviews může váš web nadále citovat v real-time, protože k tomu používá Googlebota, ne Google-Extended
• AI Mode v Search — stejná situace jako AI Overviews
• Ostatní Google produkty — Discover, Shopping, Maps atd. fungují beze změny

Co blokace ovlivní:

• Váš obsah nepůjde do tréninku budoucích Gemini modelů — takže nové verze Gemini Apps (Gemini.google.com) nebudou o vaší firmě „vědět“ z tréninku
• Nepůjde do tréninku Vertex AI modelů — relevantní pro B2B s enterprise AI aplikacemi

Pro majitele webu je tohle nejčistší volba v celém AI ekosystému: můžete říct „ne AI tréninku“ a přitom si zachovat všechnu Google viditelnost. Většina ostatních AI platforem (OpenAI, Anthropic, Meta) takovou separaci neposkytuje tak čistě.

Google-Extended byl představen 28. září 2023 jako první oficiální opt-out mechanismus pro AI trénink u Google. V září 2024 Google aktualizoval dokumentaci v souvislosti s přejmenováním Bard na Gemini Apps — explicitně uvedl, že Google-Extended ovlivňuje Gemini Apps a Vertex AI, ale nemá žádný dopad na Google Search. Toto objasnění reagovalo na obavy publisherů, kteří si nebyli jisti, zda blokace Google-Extended neovlivní jejich Search rankingy. Tato odpověď zněla jasně: ne, neovlivní.