Weihnachtliche eiskalt-feuchte Grüße an alle!
Danke für's Vorbeischauen. in meiner Suchrobot-Anweisungsdatei "robots.txt" habe ich den folgenden Code:
Unter anderem versuche ich mit der Benutzung des Stern- und des Tildezeichens ("*", "~") mit einem Mal ALLE Unterverzeichnisse zu sperren, ohne sie zu nennen. Geht das?
Ich möchte vermeiden, bestimmte Unterverzeichnisse zu nennen, da ja auch Hacker ohne weiteres die "robots.txt" einsehen können, und damit strategische Informationen über vorhandene Verzeichnisnamen erhalten.
Danke für's Vorbeischauen. in meiner Suchrobot-Anweisungsdatei "robots.txt" habe ich den folgenden Code:
Code:
User-agent: * Disallow:/d/ Disallow:/p/ Disallow: /v/ Disallow: /*/ Disallow: /~/ User-agent: EmailCollector Disallow: / User-agent: GagaRobot Disallow: /
Ich möchte vermeiden, bestimmte Unterverzeichnisse zu nennen, da ja auch Hacker ohne weiteres die "robots.txt" einsehen können, und damit strategische Informationen über vorhandene Verzeichnisnamen erhalten.
Kommentar