PHP Google Tracking - Hilfe!

lddd · 24.01.2011, 10:17

Hallo,

Ich habe eine PHP Datei (googlebot-tracker.php) die feststellt wann der Googlebot das lezte mal vorbei geschaut hat und mir dann eine E-Mail schickt.

Code:

<?php
	// Bot & Domain festlegen
	$domain = "meine-domain.com";
	$bot = "Googlebot";
	
	 if(ereg($bot, $_SERVER['HTTP_USER_AGENT'])) {

          if($bot == "Googlebot") {
            if (substr($REMOTE_HOST, 0, 11) == "216.239.46.") $bot = "Googlebot Deep Crawl";
            elseif (substr($REMOTE_HOST, 0,7) == "64.68.8") $bot = "Google Freshbot";
          }
          if ($QUERY_STRING != "") {
        	 $page = "http://" . $_SERVER['SERVER_NAME'] . $_SERVER['PHP_SELF'] . "?" . $_SERVER['QUERY_STRING'] . ""; 
          } else {
             $page = "http://" . $_SERVER['SERVER_NAME'] . $_SERVER['PHP_SELF'] . ""; 
          }

	// E-Mail Setup
	$to = "bla@bla.com";
	$subject = "Googlebot entdeckt auf: $domain";
	$body = "$bot wurde entdeckt auf $domain\n\n
	Datum.............: " . date("F j, Y, g:i a") . "
	Gecrawlte Seite.............: " . $page . "\n\n
	Have a nice day!
	";

	// E-Mail senden
	mail($to, $subject, $body);

      }

?>

Der Nachteil hier. Ich werde natürlich nur benachrichtigt wenn Googlebot genau diese eine Seite gecrawlt hat.

Gibt es irgendeine Möglichkeit das für alle Seiten, Bilder, CSS die sich innerhalb meines Webverzeichnis befinden zu realisieren? Bei einer einfachen HTML Seite mit Unterverzeichnissen.

Ich weiß ich kann mir die HTTP Requests auch über meine Webserver Access Log usw. ansehen oder mittels Wordpress geht es ja auch sehr einfach. Ich würde das aber gerne mit PHP lösen. Vorallem hat man ja auch nicht immer Zugriff auf die Webserver Logs oder nutzt Wordpress.

Danke schon einmal vorab für eure Hilfe.

sysr · 24.01.2011, 10:45

includeire diese datei in jeder seite oder am besten mit require_once einmalig.

dann müsste es schon gehen

DarkWarrior · 24.01.2011, 10:49

Grundsätzlich würde ich vorschlagen, das Skript auf allen Seiten einzubinden, die du überwachen möchtest.

Eventuell noch eine Zeitsperre einbauen, sodass höchstens alle paar Minuten eine Mail geschickt wird - sonst könnte sich dein Postfach relativ schnell füllen.

Oder die Besuche in einer Datenbank mitschreiben, und dir jeden Tag eine Zusammenfassung per Mail schicken lassen. (Cronjob)

lddd · 24.01.2011, 10:54

An ein Include hab ich auch schon gedacht. Was allerdings, wenn ich die Datei nicht in jeder der 2.000 Dateien inkl. Unterverzeichnisse einbinden möchte per Hand. Geht das nicht irgendwie dynamischer, unabhängig von Anzahl, Dateiformat und Verzeichnisstruktur meiner Seite. Z.B wächst diese ja auch mit der Zeit und ich möchte ungern jedesmal ein Include in eine neu hinzugekommende Unterseite schreiben müssen. hmm.

Wolla · 24.01.2011, 12:34

Statt eine Mail zu senden einfach eine Zeile in eine Log-Datei schreiben, die du dir dann gelegentlich anschaust.

sysr · 24.01.2011, 12:36

das mit der datenbank recording klingt dann halt am besten mit der mailmenge.

du kanst ja ein script schreiben der alle dateien im ordner durchlest und ganz oben halt den include script eintraegt.

lddd · 24.01.2011, 12:39

Aber das Script muss so ja dennoch in jede Unterseite eingebunden werden die festgehalten werden soll bei einem Besuch von Mr. Googlebot. Es geht ja nur darum das ich das Script nicht überall einbinden muss wo getrackt werden soll, sondern nur einmalig.

Ansonsten bekomm ich ja immer nur angezeigt das der Googlebot mal wieder googlebot-tracker.php angefragt hat und nicht wann er einer meiner zich anderen Seiten gecrawlt hat.

lddd · 24.01.2011, 12:40

@sysr, ja das klingt ganz gut. Schau Ich mir mal an.

nikosch · 24.01.2011, 15:04

Zitat:

oder nutzt Wordpress.

Nutzt Du nun Wordpress oder nicht? Ansonsten könntest Du Deine Seiten über eine Indexdatei durchschleifen (MOD_REWRITE)

Themen-Optionen
Druckbare Version zeigen Jemanden per E-Mail auf dieses Thema hinweisen
Thema bewerten
Thema bewerten:

Ähnliche Themen
Thema	Autor	Forum	Antworten	Letzter Beitrag
Google Maps mit Siedbar	Ingo71	JavaScript, Ajax und mehr	4	14.01.2011 08:33
[Erledigt] Google Maps Karte auf Marker zentrieren	Ingo71	PHP Einsteiger	5	11.01.2011 12:33
[Erledigt] Textformular mit Google Übersetzer möglich?	Bierce	HTML, Usability und Barrierefreiheit	2	28.10.2010 19:54
In HTML einen <object> parsen. Bitte um Hilfe!	iPHP	PHP Tipps 2010	18	30.09.2010 11:24
Google Inhalte parsen, geht nicht wegen Ajax	omex	PHP Tipps 2010	10	10.09.2010 14:48
dynamisch Google Map	AllOnline	JavaScript, Ajax und mehr	7	11.08.2010 13:32
[Erledigt] Google in geschützten Verzeichnissen?	webproger	Server, Hosting und Workstations	1	19.02.2010 18:05
[Erledigt] Marker werden nicht auf Google Maps Karte gezeigt ?!	Blade	PHP Tipps 2009	3	15.11.2009 22:57
Seite übersetzen mit Google Translate (AJAX API) und CURL/PHP on-the-fly	rigo	PHP-Fortgeschrittene	3	18.10.2009 16:52
aus text schneiden (google)	clemo	PHP Tipps 2008	29	01.10.2008 21:37
Google Sitemaps Fehler!?	Frank Burian	PHP-Fortgeschrittene	2	25.04.2006 15:03
google Ergebnis in PHP auswerten	dh1sbg	PHP-Fortgeschrittene	4	12.11.2005 22:21
[Erledigt] VARIABLEN WERDEN NICHT RICHTIG VERARBEITET!!!! HILFE		PHP Tipps 2005-2	6	02.07.2005 18:32
[Erledigt] HILFE		PHP Tipps 2004-2	1	16.12.2004 20:49

24.01.2011, 10:17
lddd Neuer Benutzer Registriert seit: 24.01.2011 Beiträge: 4 PHP-Kenntnisse: Fortgeschritten	PHP Google Tracking - Hilfe! Hallo, Ich habe eine PHP Datei (googlebot-tracker.php) die feststellt wann der Googlebot das lezte mal vorbei geschaut hat und mir dann eine E-Mail schickt. Code: <?php // Bot & Domain festlegen $domain = "meine-domain.com"; $bot = "Googlebot"; if(ereg($bot, $_SERVER['HTTP_USER_AGENT'])) { if($bot == "Googlebot") { if (substr($REMOTE_HOST, 0, 11) == "216.239.46.") $bot = "Googlebot Deep Crawl"; elseif (substr($REMOTE_HOST, 0,7) == "64.68.8") $bot = "Google Freshbot"; } if ($QUERY_STRING != "") { $page = "http://" . $_SERVER['SERVER_NAME'] . $_SERVER['PHP_SELF'] . "?" . $_SERVER['QUERY_STRING'] . ""; } else { $page = "http://" . $_SERVER['SERVER_NAME'] . $_SERVER['PHP_SELF'] . ""; } // E-Mail Setup $to = "bla@bla.com"; $subject = "Googlebot entdeckt auf: $domain"; $body = "$bot wurde entdeckt auf $domain\n\n Datum.............: " . date("F j, Y, g:i a") . " Gecrawlte Seite.............: " . $page . "\n\n Have a nice day! "; // E-Mail senden mail($to, $subject, $body); } ?> Der Nachteil hier. Ich werde natürlich nur benachrichtigt wenn Googlebot genau diese eine Seite gecrawlt hat. Gibt es irgendeine Möglichkeit das für alle Seiten, Bilder, CSS die sich innerhalb meines Webverzeichnis befinden zu realisieren? Bei einer einfachen HTML Seite mit Unterverzeichnissen. Ich weiß ich kann mir die HTTP Requests auch über meine Webserver Access Log usw. ansehen oder mittels Wordpress geht es ja auch sehr einfach. Ich würde das aber gerne mit PHP lösen. Vorallem hat man ja auch nicht immer Zugriff auf die Webserver Logs oder nutzt Wordpress. Danke schon einmal vorab für eure Hilfe.


Mister Ad PHP Code Flüsterer Registriert seit: 21.08.2005 Beiträge: 4682 PHP-Kenntnisse: Fortgeschritten

24.01.2011, 10:45
sysr Benutzer Registriert seit: 27.12.2010 Beiträge: 80 PHP-Kenntnisse: Fortgeschritten	includeire diese datei in jeder seite oder am besten mit require_once einmalig. dann müsste es schon gehen

24.01.2011, 10:49
DarkWarrior Erfahrener Benutzer Registriert seit: 02.09.2010 Beiträge: 112 PHP-Kenntnisse: Anfänger	Grundsätzlich würde ich vorschlagen, das Skript auf allen Seiten einzubinden, die du überwachen möchtest. Eventuell noch eine Zeitsperre einbauen, sodass höchstens alle paar Minuten eine Mail geschickt wird - sonst könnte sich dein Postfach relativ schnell füllen. Oder die Besuche in einer Datenbank mitschreiben, und dir jeden Tag eine Zusammenfassung per Mail schicken lassen. (Cronjob)

24.01.2011, 10:54
lddd Neuer Benutzer Registriert seit: 24.01.2011 Beiträge: 4 PHP-Kenntnisse: Fortgeschritten	An ein Include hab ich auch schon gedacht. Was allerdings, wenn ich die Datei nicht in jeder der 2.000 Dateien inkl. Unterverzeichnisse einbinden möchte per Hand. Geht das nicht irgendwie dynamischer, unabhängig von Anzahl, Dateiformat und Verzeichnisstruktur meiner Seite. Z.B wächst diese ja auch mit der Zeit und ich möchte ungern jedesmal ein Include in eine neu hinzugekommende Unterseite schreiben müssen. hmm.

24.01.2011, 12:34
Wolla Moderator Registriert seit: 06.06.2008 Beiträge: 4.945 PHP-Kenntnisse: Fortgeschritten	Statt eine Mail zu senden einfach eine Zeile in eine Log-Datei schreiben, die du dir dann gelegentlich anschaust. __________________ Warum denkt mein Hund eigentlich immer dann, wenn es an der Tür klingelt, es sei für ihn?

24.01.2011, 12:36
sysr Benutzer Registriert seit: 27.12.2010 Beiträge: 80 PHP-Kenntnisse: Fortgeschritten	das mit der datenbank recording klingt dann halt am besten mit der mailmenge. du kanst ja ein script schreiben der alle dateien im ordner durchlest und ganz oben halt den include script eintraegt.

24.01.2011, 12:39
lddd Neuer Benutzer Registriert seit: 24.01.2011 Beiträge: 4 PHP-Kenntnisse: Fortgeschritten	Aber das Script muss so ja dennoch in jede Unterseite eingebunden werden die festgehalten werden soll bei einem Besuch von Mr. Googlebot. Es geht ja nur darum das ich das Script nicht überall einbinden muss wo getrackt werden soll, sondern nur einmalig. Ansonsten bekomm ich ja immer nur angezeigt das der Googlebot mal wieder googlebot-tracker.php angefragt hat und nicht wann er einer meiner zich anderen Seiten gecrawlt hat.

24.01.2011, 12:40
lddd Neuer Benutzer Registriert seit: 24.01.2011 Beiträge: 4 PHP-Kenntnisse: Fortgeschritten	@sysr, ja das klingt ganz gut. Schau Ich mir mal an.