# Ganze Site für alle Robots sperren
User-agent: FAST Enterprise Crawler
Disallow: /

User-agent: *
Disallow: /
Allow: index.pl