Suche Link Crawler

22.06.2005, 00:48

Ich bin auf der Suche nach einem php skript welches seiten nach links durchsucht, und diese links besucht und wieder nach links sucht, usw...

Kennt hier jemand etwas derartiges?

Ich muss noch dazusagen, dass mir irgendein riesen zB open source Projekt, bei dem ich mich zuerst 2 Tage einlesen muss, nichts bringt.
Es sollte möglichst einfach sein. Wenn lediglich <a> tags verfolgt werden reicht es.

Vielen Dank
Mfg

axo · 22.06.2005, 01:37

man wget
wget --spider

könnte die primäre aufgabe der linkverfolgung für eine einzelne domain erledigen, konfigurationsoptionen so einstellen, dass nur die header geholt werden, und das ergebnis dann mit php in eine datenkbank parsen - sollte eigentlich klappen.

robo47 · 22.06.2005, 08:36

Der Beitrag wurde verschoben, wegen...
... Postings im falschen Forum. Bitte beim nächsten Mal darauf achten..

Bemerkung:
Die Suche von Scripten, Funktionen, etc. gehört in das Gesuche-Forum.

moved to Gesuche

Ähnliche Themen
Thema	Autor	Forum	Antworten	Letzter Beitrag
Suche Denkanstoss: Navigation mit unendlichen Sub-Links	Pain-maker	PHP Tipps 2006	2	17.02.2006 17:31
[Erledigt] Erweiterung der Suche		PHP Tipps 2007	2	01.12.2005 19:30
Daten aus MySQL-abfrage zum Link mit id zusammensetzen	maccoder	Datenbanken	2	13.09.2005 16:49
20px unter link neuer Link	Matthiasnet	HTML, Usability und Barrierefreiheit	7	21.08.2005 13:03
Suche direkten Link		PHP Tipps 2005-2	2	16.07.2005 00:03
mal wieder eine suche	lomtas	Datenbanken	0	12.07.2005 11:03
weiterleitung per link im gleichem frame		PHP Tipps 2005	17	23.05.2005 11:34
auf der suche nach einem link		Beitragsarchiv	8	06.04.2005 11:13
[Erledigt] Suche dringend Download Script mit einmalig Paßwort Freigabe		PHP Tipps 2005	6	05.04.2005 18:58
ein link in einem TD	Sclot	HTML, Usability und Barrierefreiheit	4	12.02.2005 13:06
Auslesen vom letzten aktiven (besuchten) Link		PHP-Fortgeschrittene	3	09.11.2004 09:35
[Erledigt] tabellen verknuepfen und ergebnisse ueber link ausgeben		PHP Tipps 2004	3	21.09.2004 06:04
Suche Link zu Browserabfrage	suendesizer	PHP Tipps 2004	2	07.09.2004 00:17
absoluter link		PHP Tipps 2004	10	01.07.2004 23:00
PHP Link ???		PHP Tipps 2004	4	25.06.2004 17:24

22.06.2005, 00:48
Gast Beiträge: n/a	Suche Link Crawler Ich bin auf der Suche nach einem php skript welches seiten nach links durchsucht, und diese links besucht und wieder nach links sucht, usw... Kennt hier jemand etwas derartiges? Ich muss noch dazusagen, dass mir irgendein riesen zB open source Projekt, bei dem ich mich zuerst 2 Tage einlesen muss, nichts bringt. Es sollte möglichst einfach sein. Wenn lediglich <a> tags verfolgt werden reicht es. Vielen Dank Mfg


Mister Ad PHP Code Flüsterer Registriert seit: 21.08.2005 Beiträge: 4682 PHP-Kenntnisse: Fortgeschritten

22.06.2005, 01:37
axo Erfahrener Benutzer Registriert seit: 24.12.2004 Beiträge: 1.814	man wget wget --spider könnte die primäre aufgabe der linkverfolgung für eine einzelne domain erledigen, konfigurationsoptionen so einstellen, dass nur die header geholt werden, und das ergebnis dann mit php in eine datenkbank parsen - sollte eigentlich klappen.

22.06.2005, 08:36
robo47 Moderator Registriert seit: 03.09.2004 Beiträge: 11.792 PHP-Kenntnisse: Fortgeschritten	Der Beitrag wurde verschoben, wegen... ... Postings im falschen Forum. Bitte beim nächsten Mal darauf achten.. Bemerkung: Die Suche von Scripten, Funktionen, etc. gehört in das Gesuche-Forum. moved to Gesuche __________________ robo47.net - Blog, Codeschnipsel und mehr \| Caching-Klassen und Opcode Caches in php \| Robo47 Components - PHP Library extending Zend Framework

Themen-Optionen
Druckbare Version zeigen Jemanden per E-Mail auf dieses Thema hinweisen