# Política de bots de L1NK.
#
# Búsqueda y uso como referencia: SÍ. Entrenamiento de modelos: NO. Eso es lo que declara el
# Content-Signal de abajo, y lo que esta lista concreta.
#
# **Esta lista es una petición cortés; quien la APLICA es el firewall de Cloudflare** (AI Crawl
# Control), que identifica a cada bot por IP verificada y no por el nombre que dice tener. Un
# crawler que ignore este fichero se encuentra un 403 igual.
#
# Por eso los dos sitios tienen que decir lo mismo, y un test lo vigila
# (tests/publicSeo.test.mjs): el 2026-08-20 divergían — el firewall bloqueaba ocho crawlers que
# este fichero no nombraba, así que un bot educado leía «adelante» y se comía un 403 sin aviso.
#
# Lo que NO entra aquí, y es deliberado: los agentes que navegan POR ENCARGO de una persona
# (ChatGPT-User, Claude-User, Perplexity-User…). Esos no entrenan: buscan algo para alguien, y
# vetarlos contradiría el `use=reference` que declaramos.

User-agent: *
Content-Signal: search=yes,ai-train=no,use=reference
Allow: /

Sitemap: https://l1nk.website/sitemap.xml

User-agent: Amazonbot
Disallow: /

User-agent: Applebot-Extended
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: CloudflareBrowserRenderingCrawler
Disallow: /

User-agent: Google-Extended
Disallow: /

User-agent: GPTBot
Disallow: /

User-agent: meta-externalagent
Disallow: /

User-agent: FacebookBot
Disallow: /

User-agent: Google-CloudVertexBot
Disallow: /

User-agent: PetalBot
Disallow: /

User-agent: ProRataInc
Disallow: /

User-agent: TikTokSpider
Disallow: /

User-agent: Timpibot
Disallow: /

# Cloudflare bloquea además a «Anchor Browser» y «Novellum AI Crawl», que no publican un token de
# user-agent documentado: se identifican por IP en el firewall y por eso no figuran arriba.