User-agent: *
Allow: /

# Основные страницы для индексации
Allow: /
Allow: /en/
Allow: /pricing
Allow: /en/pricing
Allow: /shop
Allow: /events/
Allow: /picnic-sets
Allow: /policy
Allow: /terms-of-use

# Разрешаем страницы с информацией о приложении
Allow: /app

# Блокируем технические и служебные страницы  
Disallow: /registration
Disallow: /success
Disallow: /join
Disallow: /summer2025
Disallow: /invite

# Разрешаем статические ресурсы
Allow: /images/
Allow: /fonts/
Allow: /*.css
Allow: /*.js
Allow: /favicon.svg

# Ссылка на sitemap
Sitemap: https://88date.co/sitemap.xml

# Специальные инструкции для основных краулеров
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: YandexBot
Allow: /

# Для AI-краулеров (OpenAI, Claude, Perplexity, Common Crawl)
User-agent: GPTBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: CCBot
Allow: /

# Краулинг задержка
Crawl-delay: 1