# robots.txt for http://www.xt500.org/ # Zugriff auf alle Dateien erlauben User-agent: * Disallow: /admin/ # Verwaltungsbereich ausblenden Disallow: /include/ # Vorsichtshalber die includes ausnehmen Disallow: /cgi-bin/ # Auch das Skriptverzeichnis sollte nicht indiziert werden Disallow: /spenden/ # Spendenbereich ausnehmen (Bankverbindung!) Disallow: /spenden/spenden.php # Explizit nochmal die Spendenseite raus.