Cloudflare blokuje AI boty. Váš web může být neviditelný, aniž to víte

Tichá blokace

Cloudflare, přes který běží obrovská část světového webu, začal blokovat AI crawlery ve výchozím nastavení — nejdřív u nově registrovaných domén, postupně u dalších kategorií botů. Záměr je pochopitelný: chránit obsah vydavatelů před bezplatným „sklízením" pro trénink AI. Vedlejší efekt je ale zrádný: spousta majitelů firem vůbec neví, že jejich web vrací robotům ChatGPT nebo Perplexity chybu 403 — a je pro ně tudíž neviditelný.

Jak poznat, že se vás to týká

• Používáte Cloudflare (nebo jinou WAF/CDN ochranu) a nikdy jste neřešili nastavení AI botů.
• Doménu jste registrovali nebo na Cloudflare převedli po polovině roku 2025.
• V logu serveru nevidíte žádné návštěvy GPTBota, ClaudeBota ani PerplexityBota — přestože konkurence je v AI odpovědích vidět.

Důležité rozlišení: trénink vs. vyhledávání

Ne každá blokace je chyba. AI boti se dělí na tréninkové (stahují obsah pro učení modelů), vyhledávací (indexují web pro AI odpovědi s citací zdroje) a živé (načtou stránku, když se na ni uživatel právě ptá). Zablokovat tréninkové boty a nechat vyhledávací je legitimní strategie — chráníte obsah a zůstáváte v odpovědích. Zablokovat všechno znamená zmizet.

Co nastavit

V administraci Cloudflare (sekce AI Crawl Control) povolte minimálně vyhledávací a živé boty: OAI-SearchBot, ChatGPT-User, PerplexityBot, Claude-SearchBot. A pak si ověřte, že to funguje — ideálně testem, který se na váš web podívá očima AI bota.

Přesně to dělá checker na aiscanner.cz: kromě obsahu a strukturovaných dat testuje i to, jestli server AI boty nevrací pryč. Zdarma, za 30 sekund.