# Erlaubt allen Spidern und Roboter , Diese Webseiten zu indizieren. User-agent: * Disallow: # Verbietet allen Spidern, Verzeichnisse oder Dateien zu indizieren: Eingabe der Verzeichnisse, die gesperrt werden sollen Disallow: /cgi-bin/ Disallow: /members/ Disallow: /Bilder/ Disallow: /wg37/ Disallow: /shoutbox/