# Testbot darf auf die Website nicht zugreifen User-Agent: Testbot Disallow: / # Google darf das Verzeichnis „geheim“ und alle darunter # liegenden Daten nicht aufrufen User-Agent: Googlebot Disallow: /geheim # Kein Crawler darf URLs mit Session-IDs aufrufen User-Agent: * Disallow: /*PHPSESSID= # Yahoo darf nur HTML-Dateien des Verzeichnisses „statisch“ # aufrufen, alles andere ist nicht erlaubt User-Agent: Slurp Disallow: /statisch Allow: /statisch/*.html$