User-agent: * Disallow: /cgi-bin Disallow: /secure Disallow: /media # robot.txt für www.C-Test.de # temp/secure/media sind gesperrt