User-agent: *
Allow: /
Disallow: /koh
Disallow: /koh/
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

# AI-crawlers expliciet toegelaten. Ze vallen al onder de regel hierboven, maar
# expliciet vermelden voorkomt dat een latere wijziging ze per ongeluk buitensluit,
# en het is meteen de plek om er een te weigeren mocht dat ooit nodig zijn.
User-agent: GPTBot
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

User-agent: OAI-SearchBot
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

User-agent: ChatGPT-User
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

User-agent: PerplexityBot
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

User-agent: Perplexity-User
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

User-agent: Google-Extended
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

User-agent: ClaudeBot
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

User-agent: Claude-User
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

User-agent: Applebot-Extended
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

User-agent: CCBot
Allow: /
Disallow: /docs/
Disallow: /mail/
Disallow: /email/

Sitemap: https://globalhair.institute/sitemap.xml
Sitemap: https://globalhair.institute/sitemap-video.xml
Sitemap: https://globalhair.institute/sitemap-images.xml