MySQL Query mit pcntl_fork() - Seite 2

brian johnson · 16.12.2008, 13:30

Zitat:

Zitat von hoctar

Das hilft mir echt weiter -.-

Mein Script sieht in etwa so aus:

PHP-Code:

  $pids = array();
$j = 0;
$csv = fopen('datei.csv', 'r');
while($data = fgetcsv($csv, 32, ';'))
 {
  $j++;
  $pids[$j] = pcntl_fork();
  
  if(!$pids[$j]) 
   {
     $eintrag = "INSERT INTO test (id, zeit) VALUES ('$data[0]', 'now()')";
     mysql_query($eintrag);
   }

for($i = 0; $i < $j; $i++) {
  pcntl_waitpid($pids[$i], $status, WUNTRACED);
}

aber leider funktioniert das so nicht, weil der child die verbindung schließt.

Ich habe mir schon überlegt für jeden Prozess eine neue DB verbindung aufzubauen. Würde das so gehen ? Habt ihr noch andere Möglichkeiten ?

schleife + fork? pass auf das dein pc nicht gleich das hier singt...

Zitat:

Wie könnte man die Prozesse die gleichzeitig laufen auf z.B. 10 begrenzen ? Gibts da zu irgend eine pcntl funktion ?

das macht in deinem fall wenig sinn. threads und forks sind dazu da, um dinge die wirklich gleichzeitig passieren sollen auch (begrenzt) gleichzeitig auszuführen. so z.b. ein server der mit mehreren clients gleichzeitig redet. in deinem fall jedoch wo du nur mit einer datei arbeiten musst, bleib bei einem prozess das ist hardwareschonender und definitiv nicht langsamer als mehrere prozesse (die sich auch noch abstimmen müssten, wer was liest und zudem auf mysql warten müssen und dieses wiederrum auf fsync [was du mit lock table oder transaktionen umgehen kannst])

hoctar · 16.12.2008, 14:41

Zitat:

in deinem fall jedoch wo du nur mit einer datei arbeiten musst

Ich arbeite mit mehreren Dateien.

Ich habe das nun so versucht:

PHP-Code:

  while($data = fgetcsv($csv, 64, ';'))
 {

  while($prozess[$j] != 0)
   {
    $currentprozess = $j;
    $j++;
    if($j == 9)
     {
      $j = 0;
     }
   }
   
   $pid = pcntl_fork();
   $prozess[$j] = $pid;

  if(!$pid) // Child process start
   {
    //Anweisungen
   $prozess[$currentprozess] = 0;
   }
}

Also in dem Array "Prozess" sind die PIDs gespeichert, wenn der Prozess zuende gelaufen ist setzt er seine PID im Array auf Null und die while überprüft immer ob gerade 10 Prozesse am laufen sind.
So habe ich es mir eigentlich gedacht, aber das geht leider nicht. Das Script führt die ersten 10 Prozesse aus und bleibt dann in der schleife hängen. Wahrscheinlich kann man im Prozess keine Variablen nach ausen hin verändern.
Hat da einer eine Idee wie ich die Varibale $prozess[$currentprozess] auf null setzte nach dem der prozess abgeschlossen ist ?

brian johnson · 16.12.2008, 15:24

Zitat:

Zitat von hoctar

Ich arbeite mit mehreren Dateien.

der gepostete code sagt was anderes.

hoctar · 16.12.2008, 15:33

Ich benutze im Kind Prozess mehrere Funktionen die aus einer Datei lesen.
Das hat aber nix mit meinem Problem zutun.

brian johnson · 16.12.2008, 21:43

Zitat:

Zitat von hoctar

Das hat aber nix mit meinem Problem zutun.

nein, dein problem ist verständnis. erkläre bitte jede zeile deines hier geposteten codes, vielleicht kommen wir dann weiter.

David · 16.12.2008, 22:27

Zitat:

while($prozess[$j] != 0)
{
$currentprozess = $j;
$j++;
if($j == 9)
{
$j = 0;
}
}

Damit verbraucht PHP soviel Rechenleistung, wie es kriegen kann, nur um zu prüfen, ob irgendwo ein Slot frei ist -> Performance-Killer.
siehe pcntl_wait und pcntl_sigtimedwait

David · 16.12.2008, 22:37

Zitat:

Zitat von hoctar

Wahrscheinlich kann man im Prozess keine Variablen nach ausen hin verändern.

Durch fork erzeugst Du einen neuen Prozess. Änderst Du eine Variable im einen Prozess, hat das keine Auswirkung auf eine Variable im anderen Prozess.

Themen-Optionen
Druckbare Version zeigen Jemanden per E-Mail auf dieses Thema hinweisen
Thema bewerten
Thema bewerten:

Ähnliche Themen
Thema	Autor	Forum	Antworten	Letzter Beitrag
mysql query browser + umlaute	gugu	Datenbanken	10	28.03.2009 19:15
MySQL Query zum Ersetzen von sonderbaren Umlauten	Carino	Datenbanken	13	14.05.2007 18:08
MySQL Query anzahl	JanM	PHP Tipps 2006	3	12.07.2006 19:36
Mysql Query mitloggen	cycap	Datenbanken	1	03.04.2006 21:36
MySQL Query Browser	c01001	Datenbanken	6	14.01.2006 22:13
Lost connection to MySQL server during query in ... ?	Alpha Centauri	Datenbanken	0	24.10.2005 11:09
verschiedene Query Ergebnisse in MySQL 4.0.x und 4.1.x		Datenbanken	3	18.09.2005 15:57
Suche Tipps für Persormance-Steigerung (Geld für Nützliches)		Beitragsarchiv	18	16.08.2005 10:57
Lost connection to MySQL server during query	bicpi	PHP-Fortgeschrittene	17	02.08.2005 11:42
mysql_query meldet Fehler, MySQL Query Browser nicht		Datenbanken	3	04.05.2005 17:15
mysql query... alle datensäze älter als x tage löschen...	Sclot	Datenbanken	2	05.03.2005 23:04
[Erledigt] Datenbank im MySQL Query Browser		PHP Tipps 2005	0	07.02.2005 13:54
mysql query fehler		Datenbanken	6	19.01.2005 23:44
mysql update query mit mehreren Tabellen funktioniert nicht		PHP-Fortgeschrittene	5	08.01.2005 16:29
mysql Fehler - query was empty	Anuschka	Datenbanken	2	01.09.2004 00:28


Mister Ad PHP Code Flüsterer Registriert seit: 21.08.2005 Beiträge: 4682 PHP-Kenntnisse: Fortgeschritten

16.12.2008, 15:33
hoctar Erfahrener Benutzer Registriert seit: 29.09.2008 Beiträge: 155	Ich benutze im Kind Prozess mehrere Funktionen die aus einer Datei lesen. Das hat aber nix mit meinem Problem zutun.