[Erledigt] PHP Timeouts

compushark · 26.11.2008, 19:59

Hallo PHP.de Gemeinde!
Mittels der Suche habe ich leider keine Lösung auf mein Problem entdeckt daher mein erster Post hier:

Vorwissen:
Ich habe ein Skript geschrieben, welches Daten aus einem onlinespiel sammelt und in meine SQL Datenbank speichert.
Das Skript funktioniert so, wie ich es gerne hätte.

Nun hat man mich gebeten nur alle 2 Sekunden eine Datenabfrage zu machen.
Dies habe ich durch einfügen von

PHP-Code:

  sleep(2);

realisiert.

Problem:
Das Skript wird nun nach genau 2 Minuten (60 von 171 Abfragen) fertig gestellt ohne eine Fehlermeldung auszuspucken (error_reporting ist aktiviert).

Bisherige Lösungsversuche:
Ich habe versucht die Skriptlaufzeit mittels

PHP-Code:

  set_time_limit(600);

im Skript und

Code:

max_execution_time = "0"
mysql.connect_timeout = "500"

in der php.ini zu erhöhen. Leider kommt noch immer das "2-Minuten-Phänomen"

Frage:
Liege ich richtig mit der Vermutung, dass es sich hierbei um ein timeout handelt?
Hat jemand Lösungsansätze für mich?

Falls umbedingt notwendig könnte ich den Quelltext oder den link zu meiner phpinfo() noch online stellen.
Wie gesagt funktioniert das Skript ohne Sleep() jedoch einwandfrei.

Vielen Dank im vorraus

nikosch · 26.11.2008, 20:00

Alle 2 Sekunden!!?

compushark · 26.11.2008, 20:05

Es handelt sich um einen Cron Job, welcher 2 mal am Tag ausgeführt wird.
Ein foreach-loop geht dabei ein array von 171 User-Nummern durch und sammelt in jedem Durchgang die Daten des jeweiligen Mitgliedes und legt sie in die SQL-Tabelle.

Die Spielleitung hat mich nun gebeten nur alle 2 Sekunden einen solchen Schleifen-Durchgang zu machen.
(Also 1 Mitglied alle 2 Sekunden)

nikosch · 26.11.2008, 20:30

Ach so. Hatte ich falsch verstanden.

Mich wundert das:

Zitat:

Nun hat man mich gebeten nur alle 2 Sekunden eine Datenabfrage zu machen.

Warum sammelst Du nicht erst und machst dann 1 INSERT?

compushark · 26.11.2008, 20:40

Bin gerne bereit alle Details zu erklären

Sehr guter Vorschlag. Dies werde umstellen sobald das aktuelle Problem gelöst ist.
Mehrere Baustellen sind nie gut.

Leider hilft mir der Vorschlag beim aktuellen Problem auch noch nicht weiter.
Um den Punkt der Datensammlung etwas zu erläutern:
Ich gelange via file_get_contents() und preg_match_all() an die Daten des jeweiligen Mitgliedes.
Diesen Vorgang soll ich nur alle 2 Sekunden machen. Das was ich als timeout interpretiere bleibt also auf jeden Fall.

Young Jedi · 26.11.2008, 20:54

Verstehe ich das richtig, du rufst ein Script mit einen Cronejob aller 12 Stunden auf. Dies hat dann eine Endlosschleife, welche die Benutzer -einzeln- bearbeitet und zusätzlich immer noch ein sleep(2); in sich hat?

Das ist erstens sehr ineffizient. Lieber aller 10 Minuten alle Benutzer updaten und 2. ist es nach meiner Meinung sehr Performancelastig, wenn ein Script den halben Tag durchläuft.

compushark · 26.11.2008, 21:02

Hi Jedi.
Nein ich befürchte da habe ich mich noch nicht ganz klar ausgedrückt.
Entschuldigt das bitte.

Also es funktioniert wie folgt:
- Das Skript wird alle 12 Stunden aufgerufen
- Die SQL-Tabelle wird geleert
- Das Array mit den Mitglieder IDs wird included
- Für Jede Mitglieder ID wird folgendes gemacht (foreach loop)
# Mitgliederseite mit file_get_contents laden
# geladene Seite via preg_match_all filtern
# Ergebniss für die Datenbank formatieren
# Ergebniss via Insert in die SQL-Tabelle eintragen
# 2 Sekunden warten

Im Normalfall benötigt dieses Script ca 20 Sekunden.
Durch das nun geforderte Warten sollte es jedoch theoretisch 342 Sekunden dauern. Nach 120 Sekunden kommt es jedoch zum Stopp des Skriptes wie oben beschrieben.

HPR1974 · 26.11.2008, 21:06

warum eigentlich so kompliziert?

compushark · 26.11.2008, 21:08

Weil ich Einsteiger bin?

Scherz beiseite:
Ich bin immer offen und dankbar für Optimierungsideen.
Am liebsten sind mir aber natürlich Ideen woran es haken könnte

Young Jedi · 26.11.2008, 21:11

Ahh, ok. Führe mal phpinfo(); aus und gucke, ob die Einstellungen wirklich übernommen wurden.

Für was ist eigentlich die 2 Sekunden Pause nötig?

Themen-Optionen
Druckbare Version zeigen Jemanden per E-Mail auf dieses Thema hinweisen
Thema bewerten
Thema bewerten:

26.11.2008, 19:59
compushark Neuer Benutzer Registriert seit: 26.11.2008 Beiträge: 8	[Erledigt] PHP Timeouts Hallo PHP.de Gemeinde! Mittels der Suche habe ich leider keine Lösung auf mein Problem entdeckt daher mein erster Post hier: Vorwissen: Ich habe ein Skript geschrieben, welches Daten aus einem onlinespiel sammelt und in meine SQL Datenbank speichert. Das Skript funktioniert so, wie ich es gerne hätte. Nun hat man mich gebeten nur alle 2 Sekunden eine Datenabfrage zu machen. Dies habe ich durch einfügen von PHP-Code: `sleep(2);` realisiert. Problem: Das Skript wird nun nach genau 2 Minuten (60 von 171 Abfragen) fertig gestellt ohne eine Fehlermeldung auszuspucken (error_reporting ist aktiviert). Bisherige Lösungsversuche: Ich habe versucht die Skriptlaufzeit mittels PHP-Code: `set_time_limit(600);` im Skript und Code: max_execution_time = "0" mysql.connect_timeout = "500" in der php.ini zu erhöhen. Leider kommt noch immer das "2-Minuten-Phänomen" Frage: Liege ich richtig mit der Vermutung, dass es sich hierbei um ein timeout handelt? Hat jemand Lösungsansätze für mich? Falls umbedingt notwendig könnte ich den Quelltext oder den link zu meiner phpinfo() noch online stellen. Wie gesagt funktioniert das Skript ohne Sleep() jedoch einwandfrei. Vielen Dank im vorraus


Mister Ad PHP Code Flüsterer Registriert seit: 21.08.2005 Beiträge: 4682 PHP-Kenntnisse: Fortgeschritten

26.11.2008, 20:00
nikosch moderatives Dielektrikum Registriert seit: 21.05.2008 Beiträge: 35.988 PHP-Kenntnisse: Fortgeschritten	Alle 2 Sekunden!!? __________________ -- One pixel is still too big. Please make it smaller. ASAP. Initiative Mittelstand. Die wichtigste Gestaltungsregel im Screendesign ist Pi mal Daumen des Arbeitgebers. --

26.11.2008, 20:05
compushark Neuer Benutzer Registriert seit: 26.11.2008 Beiträge: 8	Es handelt sich um einen Cron Job, welcher 2 mal am Tag ausgeführt wird. Ein foreach-loop geht dabei ein array von 171 User-Nummern durch und sammelt in jedem Durchgang die Daten des jeweiligen Mitgliedes und legt sie in die SQL-Tabelle. Die Spielleitung hat mich nun gebeten nur alle 2 Sekunden einen solchen Schleifen-Durchgang zu machen. (Also 1 Mitglied alle 2 Sekunden) Geändert von compushark (26.11.2008 um 20:11 Uhr).

26.11.2008, 20:40
compushark Neuer Benutzer Registriert seit: 26.11.2008 Beiträge: 8	Bin gerne bereit alle Details zu erklären Sehr guter Vorschlag. Dies werde umstellen sobald das aktuelle Problem gelöst ist. Mehrere Baustellen sind nie gut. Leider hilft mir der Vorschlag beim aktuellen Problem auch noch nicht weiter. Um den Punkt der Datensammlung etwas zu erläutern: Ich gelange via file_get_contents() und preg_match_all() an die Daten des jeweiligen Mitgliedes. Diesen Vorgang soll ich nur alle 2 Sekunden machen. Das was ich als timeout interpretiere bleibt also auf jeden Fall.

26.11.2008, 20:54
Young Jedi Erfahrener Benutzer Registriert seit: 19.05.2008 Beiträge: 612 PHP-Kenntnisse: Fortgeschritten	Verstehe ich das richtig, du rufst ein Script mit einen Cronejob aller 12 Stunden auf. Dies hat dann eine Endlosschleife, welche die Benutzer -einzeln- bearbeitet und zusätzlich immer noch ein sleep(2); in sich hat? Das ist erstens sehr ineffizient. Lieber aller 10 Minuten alle Benutzer updaten und 2. ist es nach meiner Meinung sehr Performancelastig, wenn ein Script den halben Tag durchläuft. __________________ http://tippsgegenlangeweile.de

26.11.2008, 21:02
compushark Neuer Benutzer Registriert seit: 26.11.2008 Beiträge: 8	Hi Jedi. Nein ich befürchte da habe ich mich noch nicht ganz klar ausgedrückt. Entschuldigt das bitte. Also es funktioniert wie folgt: - Das Skript wird alle 12 Stunden aufgerufen - Die SQL-Tabelle wird geleert - Das Array mit den Mitglieder IDs wird included - Für Jede Mitglieder ID wird folgendes gemacht (foreach loop) # Mitgliederseite mit file_get_contents laden # geladene Seite via preg_match_all filtern # Ergebniss für die Datenbank formatieren # Ergebniss via Insert in die SQL-Tabelle eintragen # 2 Sekunden warten Im Normalfall benötigt dieses Script ca 20 Sekunden. Durch das nun geforderte Warten sollte es jedoch theoretisch 342 Sekunden dauern. Nach 120 Sekunden kommt es jedoch zum Stopp des Skriptes wie oben beschrieben.

26.11.2008, 21:06
HPR1974 Erfahrener Benutzer Registriert seit: 28.03.2008 Beiträge: 1.847	warum eigentlich so kompliziert?

26.11.2008, 21:08
compushark Neuer Benutzer Registriert seit: 26.11.2008 Beiträge: 8	Weil ich Einsteiger bin? Scherz beiseite: Ich bin immer offen und dankbar für Optimierungsideen. Am liebsten sind mir aber natürlich Ideen woran es haken könnte

26.11.2008, 21:11
Young Jedi Erfahrener Benutzer Registriert seit: 19.05.2008 Beiträge: 612 PHP-Kenntnisse: Fortgeschritten	Ahh, ok. Führe mal phpinfo(); aus und gucke, ob die Einstellungen wirklich übernommen wurden. Für was ist eigentlich die 2 Sekunden Pause nötig? __________________ http://tippsgegenlangeweile.de