# Production robots.txt pro sniperdesign.cz
#
# Dev subdoména (dev.sniperdesign.cz) je proti indexaci chráněna
# `<meta name="robots" content="noindex, nofollow">` v BaseLayout
# (auto-detect přes proxy host). Meta vždy převáží nad robots.txt Allow.
#
# ⚠️ POZOR PŘI ÚPRAVÁCH: robot se řídí POUZE tím blokem, který je pro něj
# určený — pravidla z `User-agent: *` se na jmenovitě uvedené roboty
# NEVZTAHUJÍ. Proto musí mít každý jmenovaný robot vlastní kopii zákazů
# pro /sd-admin/ a /api/. Bez toho bychom jim admin a API fakticky pustili.

# ── AI / LLM roboti — explicitně vítáme ──
# Sniper Design je specialista na SEO pro AI vyhledávače; chceme, aby nás
# generativní AI nástroje uměly načíst a pochopit.
# (User-agent: * níže by je pustil i tak, ale explicitní allow je jasný signál.)

# OpenAI — OAI-SearchBot = vyhledávání v ChatGPT, GPTBot = trénink,
# ChatGPT-User = akce vyvolaná uživatelem
User-agent: GPTBot
Allow: /
Disallow: /sd-admin/
Disallow: /api/

User-agent: ChatGPT-User
Allow: /
Disallow: /sd-admin/
Disallow: /api/

User-agent: OAI-SearchBot
Allow: /
Disallow: /sd-admin/
Disallow: /api/

# Anthropic — ClaudeBot = trénink, Claude-SearchBot = vyhledávání,
# Claude-User = akce vyvolaná uživatelem
User-agent: ClaudeBot
Allow: /
Disallow: /sd-admin/
Disallow: /api/

User-agent: Claude-SearchBot
Allow: /
Disallow: /sd-admin/
Disallow: /api/

User-agent: Claude-User
Allow: /
Disallow: /sd-admin/
Disallow: /api/

# Anthropic — starší identifikátory (Anthropic je už v dokumentaci neuvádí,
# ponechány pro případ, že je někde ještě používá)
User-agent: Claude-Web
Allow: /
Disallow: /sd-admin/
Disallow: /api/

User-agent: anthropic-ai
Allow: /
Disallow: /sd-admin/
Disallow: /api/

# Perplexity — PerplexityBot = vyhledávání, Perplexity-User = akce uživatele
User-agent: PerplexityBot
Allow: /
Disallow: /sd-admin/
Disallow: /api/

User-agent: Perplexity-User
Allow: /
Disallow: /sd-admin/
Disallow: /api/

# Google-Extended = řídicí token pro použití obsahu k tréninku modelů Gemini
# a grounding v Gemini Apps / Vertex AI. Podle dokumentace Google NEovlivňuje
# zařazení webu v Google Search ani není hodnoticím signálem.
User-agent: Google-Extended
Allow: /
Disallow: /sd-admin/
Disallow: /api/

# Apple Intelligence
User-agent: Applebot-Extended
Allow: /
Disallow: /sd-admin/
Disallow: /api/

# Common Crawl (veřejný dataset, bývá zdrojem tréninkových dat pro řadu modelů)
User-agent: CCBot
Allow: /
Disallow: /sd-admin/
Disallow: /api/

# Microsoft / Bing (Copilot AI čerpá z Bing indexu)
User-agent: bingbot
Allow: /
Disallow: /sd-admin/
Disallow: /api/

# ── Všichni ostatní ──
User-agent: *
Allow: /
Disallow: /sd-admin/
Disallow: /api/

# Sitemap (dynamický, vygenerovaný z DB)
Sitemap: https://www.sniperdesign.cz/sitemap.xml

# IndexNow klíč pro okamžitou notifikaci Bing / Seznam / Yandex
# (soubor /sd-indexnow-<key>.txt)