disallow via htaccess

pirita · 26.05.2009, 09:34

Hallo,

ich hoffe poste in den richtigen Forum.
woltte alle robots auschalten, habe schon bei robots.txt alle auf disallow, aber wollte zusätzlich via htaccess was machen, so wie nofolow noindex.
Konnte mir jemand sagen wie die htaccess ich erstellen soll?

Danke

Mano · 26.05.2009, 09:44

Du kannst mit einer htaccess bestimmte IP-Adressen oder Hostnamen mit deny form **** sperren. Ob das allerdings bei Suchbots was bringt ist fraglich. Normalerweise reicht eine robots.txt dem Suchcrawler aus.

pirita · 26.05.2009, 09:50

Zitat:

Zitat von Mano

Du kannst mit einer htaccess bestimmte IP-Adressen oder Hostnamen mit deny form **** sperren. Ob das allerdings bei Suchbots was bringt ist fraglich. Normalerweise reicht eine robots.txt dem Suchcrawler aus.

danke dir, schon verstanden

PTC · 26.05.2009, 10:10

Nicht alle Robots halten sich an diese Anweisungen, besonders nicht die Spammer.

pirita · 26.05.2009, 12:46

Zitat:

Zitat von PTC

Nicht alle Robots halten sich an diese Anweisungen, besonders nicht die Spammer.

und welche andere Möglichkeit gibt dann damit die Suchmaschinen die Seite nicht finden?
ich habe schon mal gemacht bei

robots.txt
User-agent: *
Disallow: /

bei META_ROBOTS: noindex,nofollow

Die Möglichkeit mit htaccess passwort kann ich nicht nehmen...
reicht dann so?

PTC · 26.05.2009, 13:12

Eine Möglichkeit wäre eine Falle. Ein Link führt auf eine bestimmte Sperrseite, wenn man diese betritt wird man gesperrt.
Sollte man ungewollt auf diese Seite kommt, muss man sich später wieder freischalten.

Manko10 · 26.05.2009, 13:23

Aua, ich hasse das! phpfriend.de hatte das mal.

nikosch · 26.05.2009, 13:27

Stimmt, ich habe den Honigtopf neulich auch gesucht. Gibts den noch?

Dieses Mittel verhindert allerdings nicht alle Zugriffe der Bots, sondern allenfalls die, die danach vom selben (IP-basiert?) kommen.

Manko10 · 26.05.2009, 13:31

Und vor allem die, die wie ich anfangs denken, das Banner »No Bots« führte zu einer Aktionsseite, die man sich mal ansehen sollte.

Und ja: das lief IP-basiert und wenn du keine Cookies aktivierst, hast du keine Chance da ohne IP-Wechsel wieder rauszukommen, da der Captcha-Inhalt in einer Session gespeichert wird.

PTC · 26.05.2009, 13:31

Zitat:

Zitat von nikosch

[...]IP-basiert?[...]

Wie denn sonst? Ist doch die einzige Möglichkeit.

@Manko10
Warum magst du solche Fallen nicht?

Beitrag editiert:
Darauf bin ich auch schon reingefallen.

Themen-Optionen
Druckbare Version zeigen Jemanden per E-Mail auf dieses Thema hinweisen
Thema bewerten
Thema bewerten:

Ähnliche Themen
Thema	Autor	Forum	Antworten	Letzter Beitrag
mit htaccess keine indizierung in der suchmaschine	rady	Server, Hosting und Workstations	7	27.06.2008 16:03
Logins von HTACCESS auslesen!?!?		PHP Tipps 2005-2	2	08.10.2005 13:12
htaccess Weiterleitung bei Subdomains		Beitragsarchiv	2	02.08.2005 15:09
htaccess will ned	ggfan	Server, Hosting und Workstations	1	31.07.2005 15:09
[Erledigt] htaccess 2 Zugänge => Weitergabe an PHP^		PHP-Fortgeschrittene	2	23.07.2005 13:29
allgemeine frage \| mysql und htaccess	notyyy	Datenbanken	13	18.05.2005 21:01
Neuer Strato Server apache 2 Mod Rewrite & htaccess Prob	Stemmi	Server, Hosting und Workstations	4	02.05.2005 00:29
[Erledigt] htaccess Probleme auf EINEM PC (NT4 / IE5.5)		Server, Hosting und Workstations	1	02.02.2005 11:15
Schutz mit htaccess, dennoch Zugriff seitens PHP		PHP Tipps 2005	1	20.01.2005 10:52
htaccess Redirect	Magic	Server, Hosting und Workstations	2	03.01.2005 08:37
PDF Generator mit htaccess Problem	imported_dex	PHP Tipps 2004-2	1	25.11.2004 10:47
htaccess + sessions!	Broadcast	PHP-Fortgeschrittene	4	29.09.2004 10:07
automatischer htaccess login		PHP Tipps 2004	0	12.09.2004 17:09
[Erledigt] PHP + htaccess		PHP-Fortgeschrittene	6	28.08.2004 19:23
[Erledigt] htaccess Login / Logout		PHP Tipps 2004	3	13.08.2004 15:11

26.05.2009, 09:34
pirita Neuer Benutzer Registriert seit: 26.05.2009 Beiträge: 3	disallow via htaccess Hallo, ich hoffe poste in den richtigen Forum. woltte alle robots auschalten, habe schon bei robots.txt alle auf disallow, aber wollte zusätzlich via htaccess was machen, so wie nofolow noindex. Konnte mir jemand sagen wie die htaccess ich erstellen soll? Danke


Mister Ad PHP Code Flüsterer Registriert seit: 21.08.2005 Beiträge: 4682 PHP-Kenntnisse: Fortgeschritten

26.05.2009, 09:44
Mano Erfahrener Benutzer Registriert seit: 06.08.2003 Beiträge: 453 PHP-Kenntnisse: Fortgeschritten	Du kannst mit einer htaccess bestimmte IP-Adressen oder Hostnamen mit deny form **** sperren. Ob das allerdings bei Suchbots was bringt ist fraglich. Normalerweise reicht eine robots.txt dem Suchcrawler aus. __________________ www.webdeveloperfactory.de - Der Blog und Ratgeber für Webentwickler mit zahlreichen Informationen

26.05.2009, 10:10
PTC Erfahrener Benutzer Registriert seit: 27.10.2007 Beiträge: 1.708 PHP-Kenntnisse: Anfänger	Nicht alle Robots halten sich an diese Anweisungen, besonders nicht die Spammer.

26.05.2009, 13:12
PTC Erfahrener Benutzer Registriert seit: 27.10.2007 Beiträge: 1.708 PHP-Kenntnisse: Anfänger	Eine Möglichkeit wäre eine Falle. Ein Link führt auf eine bestimmte Sperrseite, wenn man diese betritt wird man gesperrt. Sollte man ungewollt auf diese Seite kommt, muss man sich später wieder freischalten.

26.05.2009, 13:23
Manko10 Supermoderator HD Registriert seit: 16.03.2008 Beiträge: 8.709 PHP-Kenntnisse: Fortgeschritten	Aua, ich hasse das! phpfriend.de hatte das mal. __________________ Refining Linux Advent Calendar series “24 Outstanding ZSH Gems”

26.05.2009, 13:27
nikosch moderatives Dielektrikum Registriert seit: 21.05.2008 Beiträge: 35.987 PHP-Kenntnisse: Fortgeschritten	Stimmt, ich habe den Honigtopf neulich auch gesucht. Gibts den noch? Dieses Mittel verhindert allerdings nicht alle Zugriffe der Bots, sondern allenfalls die, die danach vom selben (IP-basiert?) kommen. __________________ -- One pixel is still too big. Please make it smaller. ASAP. Initiative Mittelstand. Die wichtigste Gestaltungsregel im Screendesign ist Pi mal Daumen des Arbeitgebers. --

26.05.2009, 13:31
Manko10 Supermoderator HD Registriert seit: 16.03.2008 Beiträge: 8.709 PHP-Kenntnisse: Fortgeschritten	Und vor allem die, die wie ich anfangs denken, das Banner »No Bots« führte zu einer Aktionsseite, die man sich mal ansehen sollte. Und ja: das lief IP-basiert und wenn du keine Cookies aktivierst, hast du keine Chance da ohne IP-Wechsel wieder rauszukommen, da der Captcha-Inhalt in einer Session gespeichert wird. __________________ Refining Linux Advent Calendar series “24 Outstanding ZSH Gems”