# Default
User-agent: *
Disallow: /api/
Disallow: /polismap/
Disallow: /vervoer/autoverzekering/vergelijken/
Disallow: /vervoer/motorverzekering/vergelijken/
Disallow: /wonen/inboedelverzekering/vergelijken/
Disallow: /wonen/opstalverzekering/vergelijken/
Disallow: /reis/reisverzekering/vergelijken/
Disallow: /reis/annuleringsverzekering/vergelijken/
Disallow: /zorg/zorgverzekering/overstappen/
Disallow: /recht/aansprakelijkheidsverzekering/vergelijken/
Disallow: /recht/rechtsbijstandverzekering/vergelijken/
Disallow: /leven/uitvaartverzekering/vergelijken/

# Archivers
User-Agent: ia_archiver
Disallow: /

User-Agent: 008
Disallow: /

# Ads
User-agent: proximic
Disallow: /

# Searchengines
User-Agent: Baiduspider
Disallow: /

User-Agent: Yandex
Disallow: /

User-Agent: YandexBot
Disallow: /

User-agent: YRSpider
Disallow: /

User-agent: yacybot
Disallow: /

User-agent: TinEye
Disallow: /

User-agent: Exabot
Disallow: /

# SEO crawlers
User-agent: MJ12bot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: spbot
Disallow: /

User-agent: sistrix
Disallow: /

User-agent: Zookabot
Disallow: /

User-agent: SEOENGBot
Disallow: /

User-agent: SEOENGWorldBot
Disallow: /

User-agent: Seobility
Disallow: /

User-agent: SEOkicks-Robot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: SemrushBot-SA
Disallow: /

User-agent: SearchmetricsBot
Disallow: /