# robots.txt — exit.place
# Поиск открыт. Обучение ИИ-моделей закрыто (поиск/цитирование ИИ не затрагивается).
# Приватные разделы и соцграф закрыты от индексации.

# ─────────────────────────────────────────────────────────────
# Поисковики + ИИ-поиск с цитированием (Perplexity, ChatGPT-поиск)
# попадают сюда и видят только публичное.
# ─────────────────────────────────────────────────────────────
User-agent: *
# Публичное (без входа), проверено запросами: лендинг, профили, статьи, курсы, маркет.
# Лента (/feed) и клипы (/clips) требуют входа: гостю 404 и 302 соответственно, поэтому
# они НЕ разрешены — краул-бюджет на переадресацию не тратим. Вернуть, когда появится
# гостевой просмотр (тогда же вернуть /clips в sitemap.php).
Allow: /$
Allow: /articles
Allow: /article
Allow: /courses
Allow: /course
Allow: /market
Allow: /assets/

# Приватное и за логином — не тратим краул-бюджет и не плодим редиректы
Disallow: /clips
Disallow: /feed
Disallow: /api/
Disallow: /dashboard
Disallow: /settings
Disallow: /security
Disallow: /2fa
Disallow: /onboarding
Disallow: /edit_profile
Disallow: /change_phone
Disallow: /verify
Disallow: /login
Disallow: /logout
Disallow: /register
Disallow: /create_
# Уроки требуют записи/входа; видео/музыка/книги пока за логином (фаза 3)
Disallow: /lesson
Disallow: /music
Disallow: /videos
Disallow: /books

# Соцграф и личное — приватность («соцсеть для своих»)
Disallow: /connections
Disallow: /connect
Disallow: /graph
Disallow: /notifications
Disallow: /saved
Disallow: /messages
Disallow: /chats

# Технические дубли и эндпоинты
Disallow: /profile.php
Disallow: /index.php
Disallow: /*_api.php$
Disallow: /*?*action=

# ─────────────────────────────────────────────────────────────
# Обучение ИИ-моделей — запрещаем (на поиск Google/Bing/Яндекс не влияет).
# ─────────────────────────────────────────────────────────────
User-agent: GPTBot
Disallow: /

User-agent: Google-Extended
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: anthropic-ai
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: Amazonbot
Disallow: /

User-agent: Applebot-Extended
Disallow: /

Sitemap: https://exit.place/sitemap.php