User-agent: *
Disallow: /admin/
Disallow: /private/
Disallow: /tmp/
Disallow: /backend/
Disallow: /cgi-bin/

Allow: /

# Sitemap voor betere indexering
Sitemap: https://www.verstraeten.org/sitemap.xml

# Specifiek Googlebot helpen bij indexeren
User-agent: Googlebot
Allow: /  

# Crawl-delay instellen (optioneel, voorkomt server overbelasting)
Crawl-delay: 10