BOTrento LAB · zdarma

Pustí váš web AI roboty dovnitř?

Nejde o „indexaci ve všech LLM“ — každý systém má vlastní roboty a pravidla. Ukážeme u každého zvlášť, jestli je povolený, blokovaný, nebo to nejde ověřit, a odlišíme vyhledávací roboty (např. OAI-SearchBot) od tréninkových (např. GPTBot).

Co test měří

14 robotů: OpenAI (OAI-SearchBot, ChatGPT-User, GPTBot), Anthropic (Claude-SearchBot, Claude-User, ClaudeBot), Perplexity, Google (Googlebot, Google-Extended), Bing, Apple, Common Crawl
Pravidla robots.txt (nejkonkrétnější skupina, nejdelší shoda) i skutečná odpověď serveru na User-Agent robota
Text v HTML bez JavaScriptu, skrytý e-mail (Cloudflare), JSON-LD Organization/LocalBusiness
llms.txt a llms-full.txt, sitemap s lastmod

Co test nezjistí

Zda vás daný systém už má v indexu — to provozovatelé neprozrazují
Přítomnost v Bingu: bez placeného API ji nelze poctivě ověřit (Bing Search API skončilo 2025), proto ji vynecháváme
IndexNow: klíč může být na libovolné adrese, zvenku ho neověříme
Jak se CDN zachová ke skutečnému robotovi z jeho IP adres

Rozsah zdarma

Zadaná stránka, robots.txt, llms.txt, sitemap, 12 požadavků s User-Agenty robotů.

Vstup

Adresa webu.

Jak vypadá výstup

Ukázka — smyšlený web, ne skutečné měření

58

priklad-firma.cz

Dostupnost pro AI roboty (ukázka)

OAI-SearchBot vyhledávací · OpenAI

PerplexityBot vyhledávací · robots.txt zakazuje

Claude-SearchBot vyhledávací · Cloudflare vrací 403 na User-Agent z naší adresy

GPTBot tréninkový · vaše rozhodnutí, nepočítá se do skóre

Metodika — jak měříme

Povoleno = robots.txt povoluje a server vrací 200. Blokováno = zákaz v robots.txt, nebo server vrací 401/403/429 jen robotovi. Neověřeno = Cloudflare/CDN blokuje User-Agent z naší adresy, ale skutečného robota z jeho IP pustit může.
Tréninkové roboty (GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot) do skóre nepočítáme: jejich blokování je vaše rozhodnutí a na vyhledávání v AI nemá přímý vliv.
llms.txt je návrh standardu; velcí provozovatelé AI nepotvrdili, že ho používají — má proto malou váhu.

1.
Zadejte vstup
Adresu webu nebo svá čísla. Telefon ani registraci nechceme.
2.
Tři nálezy zdarma
Hned na stránce uvidíte výsledek a tři nejdůležitější nálezy.
3.
Report s důkazy
Na e-mail pošleme podrobný report s důkazy a plánem oprav.
4.
Opakované měření
Po změnách test zopakujte, nebo si objednejte automatické opakování za 30 dní.

Pevně vymezená oprava a hlídání

Nastavíme robots.txt, CDN a firewall tak, jak se rozhodnete (vyhledávání ano, trénink podle vás), a dostupnost pak pravidelně hlídáme. Cenu potvrdíme po konzultaci.

Nezávazná konzultace Vyzkoušet BOTrento 14 dní zdarma

Časté otázky

Mám povolit GPTBot?

Je to vaše rozhodnutí. GPTBot sbírá data pro trénink modelů. Pro výskyt ve vyhledávání ChatGPT je důležitý OAI-SearchBot a ChatGPT-User.

Proč je u některých robotů „neověřeno“?

Cloudflare a další CDN často rozlišují ověřené roboty podle IP adres. Náš test posílá jejich User-Agent z naší adresy, takže blokaci vidíme, ale nevíme, jestli by prošel skutečný robot.

Musím mít llms.txt?

Ne. Nevadí a může pomoct, ale žádný velký provozovatel AI nepotvrdil, že ho čte. Důležitější je obsah čitelný bez JavaScriptu.

Kontrolujete i přítomnost v Bingu?

Ne. Bez placeného API by to šlo jen stahováním výsledků vyhledávání, což porušuje podmínky Bingu. Ověřte to v Bing Webmaster Tools.

Další nástroje BOTrento LAB

Vyzkoušejte BOTrento na vlastní poště

14 dní zdarma, bez platební karty. Nic se neodešle bez vašeho schválení.

Vyzkoušet 14 dní zdarma Nebo nám napište