#Toegevoegd door server beheerders om overlast door bots te beperken start 1703674762
#Om dit bestand onaangepast te laten, begin het bestand met '#canttouchthis' (zonder quotes)
User-agent: *
Allow: /
Disallow: /badbotbantrap
Crawl-delay: 60

User-agent: PetalBot
Disallow: /

User-agent: zoominfobot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: BLEXBot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: Amazonbot
Disallow: /

User-agent: Applebot
Disallow: /

User-agent: Bytespider
Disallow: /

#Toegevoegd door server beheerders om overlast door bots te beperken end 1703674762
User-agent: *
Allow: /

# Sitemap
Sitemap: https://bofesto.nl/sitemap.xml


Disallow: /*/disclaimer/*
Disallow: /*/algemene-voorwaarden/*
Disallow: /*/privacybeleid/*
Disallow: */beheer/*
Disallow: */wp-admin/*


User-Agent: Baiduspider
Disallow: /
User-Agent: YandexBot
Disallow: /