AiPress

Claude-SearchBot

Publikováno:
·
Aktualizováno:
·
Indexační crawler Anthropicu, který buduje a udržuje index webu pro vyhledávání uvnitř Claude. Klíčový bot pro viditelnost v Claude odpovědích.

Kategorie: search

Anthropic

TL;DR

Claude-SearchBot je indexační crawler Anthropicu, který systematicky prochází weby a buduje vyhledávací index používaný Claude v aplikaci — když se vás uživatel ptá na něco, co vyžaduje aktuální informace, Claude prohledává právě tento index.

Auditovat web

Technické informace

User-agent string
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Claude-SearchBot/1.0; +Claude-SearchBot@anthropic.com)
Respektuje robots.txt
ano
Publikované IP
Rozsahy IP
Oficiální dokumentace
Odkaz

Podrobný popis

Claude-SearchBot je třetí z trojice oficiálních botů Anthropicu a funkčně nejvíc připomíná klasické vyhledávací crawlery jako Googlebot nebo Bingbot. Jeho úkolem je budovat a průběžně aktualizovat index webu, který Claude používá, když potřebuje aktuální informace pro odpověď uživateli. Když se vás někdo v Claude zeptá „Jaké jsou aktuální ceny notebooků?“ nebo „Která česká firma nabízí X službu?“, Claude nehledá odpověď jen ve svých tréninkových datech — prohledává index, který právě Claude-SearchBot udržuje.

Od ClaudeBot (trénink) a Claude-User (user-triggered fetch) se liší tím, že jde o kontinuální indexaci, ne sběr pro trénink ani reaktivní fetch. Claude-SearchBot navštěvuje váš web pravidelně, mapuje jeho strukturu, aktualizuje si informaci o obsahu a rozhoduje o tom, jak relevantní jste pro různé typy dotazů. Logicky tedy funguje podobně jako search index Googlu nebo Bingu, jen pro jiný AI produkt.

Pro majitele webu je klíčové pochopit, že Claude-SearchBot má přímý a okamžitý dopad na viditelnost v Claude odpovědích. ClaudeBot ovlivní, co budoucí verze Claude „bude vědět“ (efekt s odstupem měsíců). Claude-User funguje jen když se uživatel explicitně zeptá na konkrétní URL. Ale Claude-SearchBot rozhoduje o tom, jestli vás Claude najde v okamžiku, kdy uživatel řeší obecnější dotaz a potřebuje k němu aktuální zdroje.

Rozdělení na tři samostatné boty Anthropic formalizoval v únoru 2026. Do té doby funkce vyhledávání částečně pokrýval obecnější user-agent claude-web, který je nyní deprecovaný. Pokud v robots.txt ještě máte pravidla pro claude-web, nemají na Claude-SearchBot žádný vliv — boti jsou posuzováni striktně podle svého aktuálního user-agent stringu.

Co se stane, když bota zablokujete

Co se stane, když Claude-SearchBot zablokujete

Pokud v robots.txt zakážete Claude-SearchBot, Anthropic vás přestane indexovat pro vyhledávání uvnitř Claude aplikace. V praxi to znamená, že když uživatelé v Claude řeší dotazy vyžadující aktuální informace z webu — a Claude hledá ve svém indexu relevantní zdroje — váš web se mezi výsledky nebude objevovat. I když by vaše stránka byla ideální odpovědí na uživatelův dotaz, Claude o ní nebude vědět.

Toto je podle našeho názoru nejkritičtější bot Anthropicu pro byznysovou viditelnost. ClaudeBot ovlivňuje budoucí tréninky (efekt s odstupem), Claude-User jen dotazy na konkrétní URL, ale Claude-SearchBot rozhoduje o tom, jestli Claude vás objeví, když uživatel formuluje generický dotaz („nejlepší CRM pro malé firmy“, „kde v Brně objednat průmyslové ložisko“, „která česká agentura dělá Next.js“). Pokud tady nejste, vaše konkurence získá uživatele, kterého byste mohli mít vy.

Blokování Claude-SearchBot má smysl jen ve velmi specifických případech — například pokud provozujete placený obsah, který nechcete zpřístupnit přes AI vyhledávání, nebo pokud řešíte licenční omezení. Pro standardní B2B firmy, e-shopy, SaaS produkty nebo služby je zablokování Claude-SearchBot jednou z nejhorších věcí, kterou můžete v oblasti AI viditelnosti udělat.

Doporučení pro B2B

Povolit

<p>Claude-SearchBot má ze všech tří Anthropic botů nejpřímější dopad na vaši současnou viditelnost v Claude odpovědích. Blokování tohoto bota znamená okamžitou ztrátu šance objevit se, když uživatel formuluje obecnější dotaz a Claude hledá aktuální zdroje. Povolení Claude-SearchBot je pro jakýkoliv B2B web prakticky povinnost, pokud chcete být součástí AI vyhledávacího ekosystému.</p>

Ukázky robots.txt

Povolit bota

User-agent: Claude-SearchBot
Allow: /

Zablokovat bota

User-agent: Claude-SearchBot
Disallow: /

Omezit frekvenci (Crawl-delay)

User-agent: Claude-SearchBot Crawl-delay: 1

Částečné blokování

User-agent: Claude-SearchBot
Disallow: /premium/
Disallow: /members/
Allow: /

Historie

Do února 2026 Anthropic používal obecnější user-agent claude-web, který zastřešoval jak user-triggered fetche, tak některé indexační aktivity. V únoru 2026 došlo k formalizaci tří samostatných botů: ClaudeBot (trénink), Claude-User (user-triggered) a Claude-SearchBot (indexace). Starší claude-web je nyní deprecovaný — pokud ho ještě vidíte v serverových lozích, jde o zastaralé verze nebo spoofované požadavky vydávající se za Anthropic.

Časté dotazy

Proč je Claude-SearchBot důležitější než ClaudeBot pro aktuální viditelnost?

ClaudeBot sbírá data pro trénink budoucích verzí modelu — jeho efekt uvidíte až v dalších generacích Claude, typicky s odstupem měsíců. Claude-SearchBot naopak buduje vyhledávací index, který Claude používá právě teď při každém dotazu vyžadujícím aktuální informace. Pokud chcete být vidět v Claude odpovědích bezprostředně, nejdůležitější je Claude-SearchBot. ClaudeBot je dlouhodobá investice, Claude-SearchBot je otázka současné viditelnosti.

Jak Claude-SearchBot vybírá, které stránky indexovat a jak často?

Anthropic přesné kritéria neuveřejňuje, ale z pozorování chování je zřejmé, že Claude-SearchBot používá podobné principy jako klasické vyhledávací crawlery: aktualizuje často měněný obsah častěji, upřednostňuje stránky s dobrou strukturou a vnitřním propojením, a respektuje signály jako sitemap.xml. Pokud chcete Claude-SearchBot pomoci vás najít, investujte do kvalitní sitemap, čisté struktury HTML a případně do llms.txt souboru.

Je Claude-SearchBot jediný způsob, jak se dostat do Claude odpovědí?

Ne, ale je nejspolehlivější. Existují tři cesty, jak se Claude o vašem obsahu dozví: trénink (ClaudeBot, efekt s odstupem měsíců), vyhledávací index (Claude-SearchBot, efekt okamžitý a systematický) a user-triggered fetch (Claude-User, funguje jen když se uživatel explicitně zeptá na váš URL). Claude-SearchBot je jediná cesta, která zajistí, že vás Claude objeví při generických dotazech bez předchozí znalosti vašeho webu — tedy přesně u uživatelů, kteří o vás ještě neví.

Ovlivňuje blokování Claude-SearchBot moje pozice v Googlu nebo Bingu?

Ne. Claude-SearchBot je samostatný crawler Anthropicu a s Googlem, Bingem ani jinými vyhledávači nesdílí data. Blokování Claude-SearchBot ovlivní pouze vaši viditelnost v Claude aplikaci — tedy když někdo v Claude chatu řeší dotaz vyžadující vyhledávání. Klasické SEO (Google, Bing) zůstává zcela nezávislé.

Mám povolit Claude-SearchBot, i když mám malý web s pár stránkami?

Ano, nejspíš ještě víc než velké weby. Malé specializované weby mají v AI vyhledávání často lepší šanci prosadit se na niche dotazech než velké generické portály. Claude-SearchBot u menších webů obvykle nezpůsobuje výkonnostní problémy (crawluje méně agresivně než velcí indexační crawleři) a pro niche B2B témata může být vaše stránka pro Claude vysoce hodnotný zdroj. Pokud řešíte zatížení serveru, použijte direktivu Crawl-delay místo úplného blokování.

Je váš web dobře nastavený pro AI crawlery?

Nechte si zauditovat robots.txt a další signály.

Auditovat web zdarma