# robots.txt voor sbdbelgium.be
#
# LET OP: dit is een FYSIEK bestand. Zolang het bestaat, serveert de webserver
# dit en NIET de virtuele robots.txt die WordPress zelf genereert. Voegt een
# plugin later regels toe via de virtuele robots.txt, dan komen die hier niet
# automatisch bij -- neem ze dan handmatig over.
#
# De eerste blok hieronder is letterlijk overgenomen uit de virtuele robots.txt
# zoals die op 05-09-2026 werd geserveerd.

User-agent: *
Disallow: /wp-content/uploads/wc-logs/
Disallow: /wp-content/uploads/woocommerce_transient_files/
Disallow: /wp-content/uploads/woocommerce_uploads/
Disallow: /*?add-to-cart=
Disallow: /*?*add-to-cart=
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# --- Facetfilters onder /shop/ -- toegevoegd 05-09-2026, CompuService ---
#
# De facetfilter maakt per combinatie van merk, categorie en gender een unieke
# URL als padsegment, bijvoorbeeld:
#   /shop/c-aspire-or-resolve/category-belt-or-crop-top-or-hoodie/
#   /fr/shop/c-nova-or-resolve/gender-femmes/category-beanie-or-belt/
#
# Die ruimte is combinatorisch en dus in de praktijk oneindig. Geen enkele
# ervan wordt gecached (cacheStatus dynamic), dus elke aanroep is een volledige
# PHP-render. Op 04-09-2026 haalde ClaudeBot er 754.866 op in 24 uur -- de helft
# van al het verkeer van die dag.
#
# Veilig te blokkeren, gecontroleerd op 05-09-2026:
#   - producten staan op /product/          (niet onder /shop/)
#   - categorieen staan op /product-category/
#   - merken staan op /merk/
#   - in de sitemap staat van /shop/ enkel /shop/, /fr/shop/ en /en/shop/ zelf,
#     geen enkel subpad
# Er gaat dus niets indexeerbaars verloren. Bezoekers zijn hier niet door
# geraakt: robots.txt geldt alleen voor crawlers, de filter blijft gewoon
# werken voor klanten.

Disallow: /shop/*/
Disallow: /fr/shop/*/
Disallow: /en/shop/*/
Allow: /shop/$
Allow: /fr/shop/$
Allow: /en/shop/$

# De oude query-stringvorm van dezelfde filter.
Disallow: /*?*yith_wcan=

Sitemap: https://sbdbelgium.be/wp-sitemap.xml