IP von Suchmaschienen

halskrause · 02.12.2009, 14:17

Hi. Gibt es vielleicht irgendwo eine Liste, die die IPs von den wichtigen Suchmaschienen beinhaltet?
Ich habe eine extra Seite für "IPhone und Android's" gemacht. Ausser mit diesen Geräten soll man nicht auf die Seite zugreifen dürfen. So hab ich mir gedacht, dass ich neben "'HTTP_USER_AGENT'" auch gleich nach IPs prüfen kann, um Suchmaschienen den Einlass zu gewähren.

Flor1an · 02.12.2009, 14:33

Glaub ich kaum dass du so eine Liste findest. Suchmaschinen werden wohl auch mehr oder weniger oft IP Adressen wechseln, bzw. die Spider nicht unbedingt immer auf der selben laufen. Daher würde ich nicht das Risiko eingehen und Suchmaschinen aussperren. Wieso möchtest du unbedingt User aussperren? Reicht nicht ein einfacher Hinweis, wenn der User Agent sagt das es kein Iphone ist dass es noch eine andere Webseite gibt?

rudygotya · 02.12.2009, 15:16

google => robots.txt

PsychoEagle · 02.12.2009, 16:02

Für Google hatte ich da mal was gefunden oder selber gemacht? Weiß gar nicht mehr, aber folgenden Code hab ich da:

PHP-Code:

  <?php
  $robot = '';  
  $usr_ip       = $_SERVER['SERVER_ADDR'];    
  $usr_hostname = gethostbyaddr($usr_ip);
  $usr_ip2      = gethostbyname($usr_hostname);      
  if($usr_ip == $usr_ip2 AND stripos($usr_hostname,'googlebot') !== FALSE) {   
    $robot = 'Google';    
  }
?>

Allgemein hat Google auch nen eigenen IP-Bereich 66.249.xxx.xxx soweit mir bekannt ist, aber kann mich da auch irren.

Anhand vom User-Agent hab ich folgenden Code, jedoch kannst du von dem nicht unbedingt ausgehen:

PHP-Code:

  <?php
  $robot = '';  
  /* User-Agent */
  $usr_agent = strtolower($_SERVER['HTTP_USER_AGENT']);           
  if(stripos($usr_agent,'googlebot') !== FALSE) {
    $robot = 'Google';
  } elseif(stripos($usr_agent,'msnbot') !== FALSE) {
    $robot = 'MSN';
  } elseif(stripos($usr_agent,'crawl.yahoo') !== FALSE) {
    $robot = 'Yahoo';
  } elseif(stripos($usr_agent,'archiver') !== FALSE) {
    $robot = 'Alexa';
  } elseif(stripos($usr_agent,'exabot') !== FALSE) {
    $robot = 'Exalead';
  } elseif(stripos($usr_agent,'fast') !== FALSE) {
    $robot = 'Fast';
  } elseif(stripos($usr_agent,'suchen.de') !== FALSE) {
    $robot = 'Suchen.de';
  } elseif(stripos($usr_agent,'firefly') !== FALSE) {
    $robot = 'Fireball';
  } elseif(stripos($usr_agent,'bigfinder') !== FALSE) {
    $robot = 'Bigfinder';
  }
?>

Grüße
Das Psy

Themen-Optionen
Druckbare Version zeigen Jemanden per E-Mail auf dieses Thema hinweisen
Thema bewerten
Thema bewerten:

Ähnliche Themen
Thema	Autor	Forum	Antworten	Letzter Beitrag
.html anstatt .php - Suchmaschienen Optimierung!	Ithron	Server, Hosting und Workstations	11	22.08.2007 08:48
PHP-CMS und Suchmaschienen	DerN8WaechterX	PHP Tipps 2007	12	21.11.2005 19:41
[Erledigt] Suchmaschienen?		PHP-Fortgeschrittene	9	21.11.2004 10:56

02.12.2009, 14:17
halskrause Erfahrener Benutzer Registriert seit: 29.08.2008 Beiträge: 777	IP von Suchmaschienen Hi. Gibt es vielleicht irgendwo eine Liste, die die IPs von den wichtigen Suchmaschienen beinhaltet? Ich habe eine extra Seite für "IPhone und Android's" gemacht. Ausser mit diesen Geräten soll man nicht auf die Seite zugreifen dürfen. So hab ich mir gedacht, dass ich neben "'HTTP_USER_AGENT'" auch gleich nach IPs prüfen kann, um Suchmaschienen den Einlass zu gewähren.


Mister Ad PHP Code Flüsterer Registriert seit: 21.08.2005 Beiträge: 4682 PHP-Kenntnisse: Fortgeschritten

02.12.2009, 14:33
Flor1an da schreibt der ElePHPant Registriert seit: 18.06.2008 Beiträge: 8.903 PHP-Kenntnisse: Fortgeschritten	Glaub ich kaum dass du so eine Liste findest. Suchmaschinen werden wohl auch mehr oder weniger oft IP Adressen wechseln, bzw. die Spider nicht unbedingt immer auf der selben laufen. Daher würde ich nicht das Risiko eingehen und Suchmaschinen aussperren. Wieso möchtest du unbedingt User aussperren? Reicht nicht ein einfacher Hinweis, wenn der User Agent sagt das es kein Iphone ist dass es noch eine andere Webseite gibt?

02.12.2009, 15:16
rudygotya Erfahrener Benutzer Registriert seit: 28.05.2008 Beiträge: 2.094 PHP-Kenntnisse: Fortgeschritten	google => robots.txt __________________ ++++ Wieder einer ins Netz gegangen: Phishers Fritz zufrieden ++++ Blog

02.12.2009, 16:02
PsychoEagle there's only one psycho Registriert seit: 21.08.2007 Beiträge: 1.283 PHP-Kenntnisse: Anfänger	Für Google hatte ich da mal was gefunden oder selber gemacht? Weiß gar nicht mehr, aber folgenden Code hab ich da: PHP-Code: `<?php $robot = ''; $usr_ip = $_SERVER['SERVER_ADDR']; $usr_hostname = gethostbyaddr($usr_ip); $usr_ip2 = gethostbyname($usr_hostname); if($usr_ip == $usr_ip2 AND stripos($usr_hostname,'googlebot') !== FALSE) { $robot = 'Google'; } ?>` Allgemein hat Google auch nen eigenen IP-Bereich 66.249.xxx.xxx soweit mir bekannt ist, aber kann mich da auch irren. Anhand vom User-Agent hab ich folgenden Code, jedoch kannst du von dem nicht unbedingt ausgehen: PHP-Code: <?php $robot = ''; /* User-Agent / $usr_agent = strtolower($_SERVER['HTTP_USER_AGENT']); if(stripos($usr_agent,'googlebot') !== FALSE) { $robot = 'Google'; } elseif(stripos($usr_agent,'msnbot') !== FALSE) { $robot = 'MSN'; } elseif(stripos($usr_agent,'crawl.yahoo') !== FALSE) { $robot = 'Yahoo'; } elseif(stripos($usr_agent,'archiver') !== FALSE) { $robot = 'Alexa'; } elseif(stripos($usr_agent,'exabot') !== FALSE) { $robot = 'Exalead'; } elseif(stripos($usr_agent,'fast') !== FALSE) { $robot = 'Fast'; } elseif(stripos($usr_agent,'suchen.de') !== FALSE) { $robot = 'Suchen.de'; } elseif(stripos($usr_agent,'firefly') !== FALSE) { $robot = 'Fireball'; } elseif(stripos($usr_agent,'bigfinder') !== FALSE) { $robot = 'Bigfinder'; } ?> Grüße Das Psy __________________ "Weaseling out of things is important to learn. It's what separates us from the animals ... except the weasel." (Homer J. Simpson)*