User-agent: * #specificeer agent type # hieronder de directories/files die de bot niet hoeft/mag bezoeken #speciale directories tbv ontwikkeling Disallow: /new Disallow: /oud Disallow: /test #speciale beheer en systeemdirectories Disallow: /includes Disallow: /templates Disallow: /uploads Disallow: /CustomErrorFiles Disallow: /FCKeditor Disallow: /beheer Disallow: /js Disallow: /css Disallow: /admin