# robots.txt zum C4 User-agent: * Disallow: #User-agent gibt an, welcher Robot diese Seite(n) durchsuchen darf, durch die Eingabe eines * dürfen es alle. #Mit Disallow wird angegeben, welche Verzeichnisse nicht durchsucht werden sollen, wildcards wie * sind dabei leider nicht Möglich. #Durch das leerlassen von Disallow, darf der Robot alles durchsuchen. Mit Disallow: /, darf er nichts duchrsuchen.