# robots.txt — dit bestand wordt PUBLIEK geserveerd op /robots.txt. # Alles hieronder, commentaar inbegrepen, is leesbaar voor iedereen: klanten, # concurrenten en scanners. Zet hier dus geen leveranciersnaam, geen uitleg over # wat een geblokkeerd pad bevat en geen verwijzing naar broncode of tests. # De onderbouwing per regel hoort in de repo, niet in dit bestand. # # De `Sitemap:`-regel MOET een volledige URL zijn (RFC 9309); een relatief pad # wordt genegeerd. Dit is een statisch bestand zonder env-variabelen, dus die # ene regel verhuist bij een domeinwissel met de hand mee. Een vergeten wissel # is een rode unit-test, geen ontdekking achteraf. User-agent: * Allow: / Disallow: /api/ # Uitzonderingen: de bronnen die de winkelpagina's zelf ophalen om te renderen. # Blijven die dicht, dan ziet een crawler een pagina zonder producten. Langste # match wint (RFC 9309), dus deze regels winnen van `Disallow: /api/`; de rest van # /api/ blijft dicht. Allow: /api/shop-catalogus Allow: /api/pagina Allow: /api/img Allow: /api/product-reviews-api # Een geplande ophaling van dit adres moet dit bestand mogen lezen; zonder # deze regel loopt zo'n ophaling stuk op onze eigen robots.txt, en dat is een # storing die niemand ziet omdat de vorige ophaling gewoon blijft staan. De # inhoud zelf blijft achter een sleutel. Allow: /api/shopping-feed # Geen winkelpagina's. Disallow: /tv Disallow: /kiosk Disallow: /guest Disallow: /wifi Disallow: /whatsapp-onboard Disallow: /signage Disallow: /review-manifest.webmanifest Sitemap: https://www.compleetsanitair.nl/sitemap.xml