# Affinità politica (affinitapolitica.it)
#
# Riserva dell'estrazione di testo e di dati (art. 70-quater e 70-septies della
# legge 633/1941; art. 4, par. 3, della direttiva (UE) 2019/790): vedi /note-legali#ia.
# Text and data mining reservation: see /note-legali?lang=en#ia.
#
# Criterio: si bloccano SOLO i crawler che il loro gestore dichiara usati per
# addestrare modelli di intelligenza artificiale. Restano aperti i motori di
# ricerca (Googlebot, Bingbot...), Google-Extended (regola anche il grounding di
# Gemini con la Ricerca Google), e i crawler di ricerca e quelli che agiscono per
# conto di un utente e citano la fonte (OAI-SearchBot, ChatGPT-User,
# Claude-SearchBot, Claude-User, PerplexityBot, Perplexity-User, Meta-WebIndexer,
# Meta-ExternalFetcher...). Nessuna riserva TDM globale: escluderebbe anche chi cita.

User-agent: *
Allow: /
Disallow: /admin/
Disallow: /api/
Disallow: /storage/
Disallow: /lang/

# OpenAI: addestramento (non OAI-SearchBot né ChatGPT-User)
User-agent: GPTBot
Disallow: /

# Anthropic: addestramento (non Claude-SearchBot né Claude-User)
User-agent: ClaudeBot
Disallow: /

# Common Crawl: archivio usato per addestrare modelli
User-agent: CCBot
Disallow: /

# Apple: solo l'uso per addestrare i modelli (Applebot, la ricerca, resta aperto)
User-agent: Applebot-Extended
Disallow: /

# Meta: addestramento di modelli (non Meta-WebIndexer né Meta-ExternalFetcher)
User-agent: Meta-ExternalAgent
Disallow: /

# ByteDance: addestramento (nome d'uso comune; ByteDance non pubblica documentazione)
User-agent: Bytespider
Disallow: /

Sitemap: https://affinitapolitica.it/sitemap.xml