User-agent: *

# WordPress beheergedeelte
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# Boekingsstraat (geen indexeerbare pagina's)
Disallow: /booking/

# ── Oude tour-URL-patronen: BEWUST crawlbaar gelaten ────────────────────────
# De oude /{slug}/{id}/…-URL's (met _page, date, my_tour, month_year, N.B,
# www.hotel.cz en hotelnaam-segmenten) 301'en nu naar /tour/{slug}/ via
# actief-tours-sync. Ze mogen dus WEL gecrawld worden, zodat Google de 301 ziet
# en ze consolideert i.p.v. ze in "crawled - not indexed" te laten hangen.
# (Voorheen stonden hier _page/date/my_tour/www./N.B/hotel-blokkades; verwijderd.)

# ── Filterparameters die duplicate content veroorzaken ──────────────────────

Disallow: /*?show_all=
Disallow: /*&show_all=
Disallow: /*?PageSpeed=
Disallow: /*?utm_source=
Disallow: /*?utm_medium=
Disallow: /*?utm_campaign=
Disallow: /*?action=
Disallow: /*?regio*

# ── WordPress plugin-querystring navigatie ───────────────────────────────────

Disallow: /*?plugin=actief_tour_cms*
Disallow: /*?page=search_results*
Disallow: /*?s=
Disallow: /*?feed=

# ── WordPress taxonomie- en archief-pagina's (geen tourinhoud) ──────────────

Disallow: /tag/
Disallow: /category/
Disallow: /author/
Disallow: /feed/
Disallow: /attachment/
Disallow: /actief-natuur/
Disallow: /hotel/
Disallow: /germany/
Disallow: /actief/

# ── WordPress systeem-URLs ───────────────────────────────────────────────────

Disallow: /wp-json/
Disallow: /wp-includes/

# ── Oude URL-structuren (vervangen of verlopen) ──────────────────────────────

Disallow: /section/
Disallow: /cultureel/
Disallow: /kb/
Disallow: /uncategorized/

# ── AI-crawlers ─────────────────────────────────────────────────────────────
# Beleid: TRAINING-/dataset-crawlers blokkeren, AI-ZOEK-/antwoord-crawlers
# toestaan (voor zichtbaarheid in AI-antwoorden zoals ChatGPT-search, Perplexity).

# Training / dataset → blokkeren
User-agent: GPTBot
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: Amazonbot
Disallow: /

User-agent: meta-externalagent
Disallow: /

# AI-zoek / antwoord-engines → toestaan
User-agent: OAI-SearchBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Perplexity-User
Allow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: Claude-User
Allow: /

User-agent: anthropic-ai
Allow: /

# ── Sitemaps ─────────────────────────────────────────────────────────────────

Sitemap: https://actief-in-tsjechie.nl/sitemap_index.xml
Sitemap: https://actief-in-tsjechie.nl/tours_url.xml