# Autoriser la recherche IA et l'utilisation par les agents
User-agent: OAI-SearchBot
User-agent: ChatGPT-User
User-agent: PerplexityBot
User-agent: FirecrawlAgent
User-agent: AndiBot
User-agent: ExaBot
User-agent: PhindBot
User-agent: YouBot
Allow: /

# Interdire la collecte de données pour l'entraînement IA
User-agent: GPTBot
User-agent: CCBot
User-agent: Google-Extended
Disallow: /

# Interdire les moteurs de recherche chinois et bots IA chinois
User-agent: Baiduspider
User-agent: Sogou Spider
User-agent: 360Spider
User-agent: YisouSpider
User-agent: ShenmaSpider
User-agent: TencentBot
User-agent: ByteDanceSpider
Disallow: /

# Autoriser l'accès aux outils SEO
User-agent: SemrushBot
Allow: /

# Autoriser l'indexation classique
User-agent: Googlebot
User-agent: Bingbot
Allow: /

# Autoriser les moteurs de recherche d’images
User-agent: Googlebot-Image
User-agent: Bingbot-Image
User-agent: Yahoo-MMCrawler
User-agent: YandexImages
User-agent: Pinterestbot
User-agent: TinEye-bot
Allow: /

# Bloquer l'accès aux zones d'administration pour tous les bots
User-agent: *
Disallow: /admin/
Disallow: /internal/

User-agent: Googlebot-Imag Allow: /