# Ganze Site für alle Robots sperren User-agent: * Disallow: #Die Robots -Datei dient dazu, #die Websites von einigen #Suchmaschinen ferzuhalten... #Oder um es den Suchmaschinen zu #erlauben, die META -TAGS zu durchsuchen #Achtung eine solche robots.txt -Datei #ist nicht zwingend für die Indexierung