# jaarhoroscoop.com
#
# Iedereen is welkom, zoekmachines en AI-crawlers allebei. Er is niets
# afgeschermd, dus elke groep hieronder staat op "alles toegestaan".
#
# Belangrijker dan crawlen is gebruiken: de gratis inhoud van deze site staat
# onder Creative Commons Naamsvermelding 4.0 (CC BY 4.0). Overnemen, vertalen,
# samenvatten, in een antwoord verwerken en gebruiken als trainingsmateriaal
# mag, met bronvermelding en een link terug. Voorwaarden en de afbakening:
# https://jaarhoroscoop.com/licentie
#
# Niet onder die licentie: de betaalde rapporten (waaronder /voorbeeld/), de
# foto's en video's, en de merknaam.
#
# Machineleesbaar: /llms.txt, /llms-full.txt, /data/jaarhoroscoop-2027.json,
# /.well-known/tdmrep.json. Achter elke gratis pagina-URL mag .md.
#
# (Staging draait op noindex via de X-Robots-Tag-header; dit bestand is
# geschreven voor productie en hoeft bij een cutover niet aangepast.)

User-agent: *
Allow: /

# Zoek- en antwoordmachines. Een eigen groep leest de *-groep niet meer, dus
# staat hier expliciet hetzelfde: alles mag (RFC 9309).
User-agent: Googlebot
User-agent: Bingbot
User-agent: OAI-SearchBot
User-agent: Claude-SearchBot
User-agent: PerplexityBot
User-agent: Meta-WebIndexer
User-agent: Amzn-SearchBot
User-agent: Applebot
User-agent: DuckAssistBot
User-agent: YandexBot
Allow: /

# Door een gebruiker aangevraagde ophaalacties (iemand plakt een link in een
# assistent). Ook welkom.
User-agent: ChatGPT-User
User-agent: Claude-User
User-agent: Perplexity-User
User-agent: Meta-ExternalFetcher
User-agent: Amzn-User
User-agent: MistralAI-User
User-agent: Google-Agent
Allow: /

# Crawlers die (ook) voor modeltraining verzamelen. Bewuste keuze: toegestaan,
# onder de voorwaarden van CC BY 4.0 hierboven.
User-agent: GPTBot
User-agent: ClaudeBot
User-agent: Google-Extended
User-agent: Google-CloudVertexBot
User-agent: Applebot-Extended
User-agent: meta-externalagent
User-agent: Amazonbot
User-agent: CCBot
User-agent: Bytespider
User-agent: cohere-ai
User-agent: Diffbot
User-agent: Timpibot
User-agent: Omgilibot
User-agent: ImagesiftBot
User-agent: AI2Bot
Allow: /

Sitemap: https://jaarhoroscoop.com/sitemap-index.xml