# robots.txt fuer http://qipp.mathematik.uni-dortmund.de/ User-agent: * Disallow: /temp/ # Die Dateien sind sehr kurzlebig Disallow: /pages/ # Die Dateien sind geheim Disallow: /logfiles/ # Die ändern sich jeden Tag Disallow: /pics/ # Bilder nicht downloaden Disallow: /cgi-bin/ # CGI Ausgaben nicht indexieren Disallow: /news.html # Die news.html ändert sich täglich