| | | | |
03.08.2005, 16:18
| |
| Benutzer Registriert seit: 25.10.2004
Beiträge: 43
 |  große datenmengen aus mysql auslesen ich würde gerne ca. 30mb aus einer datenbank mit ca. 22000 zeilen mit je 33 spalten in ein arry auslesen. hab das ganze schon mit einer normalen select abfrage probiert, aber leider braucht mein pc zu hause schon 20min bei 100% cpu auslastung. ist wohl irgendwie zu viel für den apache server. gibts irgendeine möglichkeit solche großen datenmengen möglichst schnell auszulesen. bei mir sieht das bisher so aus: Code: $sqlString = "SELECT * from $table";
$Ergebnis = mysql_db_query($Quelle, $sqlString, $Server);
if (!$Ergebnis) {
echo "
Datenbankfehler: $sqlString";
}
else { // Daten auslesen
$anzahl = mysql_num_rows($Ergebnis);
for ($i = 0; $i < $anzahl; $i++) {
if ($anzahl) {
$anz = count($arr_spalte);
for ($j = 0; $j < $anz; $j++) {
$arr_spalte_inhalt[$j][$i] = mysql_result($Ergebnis, $i, $arr_spalte[$j]);
}
}
}
}
das war bisher die kleinste tabelle. normal sind die bis zu 4mal so groß. also zt über 100mb. |
|
 | |
| PHP Code Flüsterer Registriert seit: 21.08.2005 Beiträge: 4682 PHP-Kenntnisse: Fortgeschritten | |
|
03.08.2005, 16:31
| |
| Gast
Beiträge: n/a
| Lol was steht n da drinne? |
|
03.08.2005, 16:48
| |
| Moderator  Registriert seit: 03.09.2004
Beiträge: 11.792
PHP-Kenntnisse: Fortgeschritten   | dann ist dein DB-design / Applikations-design nicht gut, wozu brauchst du so viele daten? Was macht man mit so nem array? Und überhaupt, wenn nicht grad ein eigener Server, 30 mb scriptspeicher findet sich bei so gut wie keinem hoster würd ich mal behaupten. 30 MB wirst du in nem Array mit PHP wohl nie wirklich schnell gehandelt bekommen. mfg robo47
__________________ robo47.net - Blog, Codeschnipsel und mehr |  Caching-Klassen und Opcode Caches in php | Robo47 Components - PHP Library extending Zend Framework |
|
|
|
03.08.2005, 17:22
| |
| Benutzer Registriert seit: 25.10.2004
Beiträge: 43
| also zum DB design. ich hab einfach ne ganz normale tabelle über phpMyAdmin angelegt.  das ganze wird eine kleine suchmaschine. ich habe zb 2 tabellen eine mit altern daten und eine mit neuen. nun muss ich die alten daten mit den neuen daten updaten. ich lese also alle neuen daten in ein array und update diese dann mit dem altdatenbestand zeile für zeile. es muss so sein, da im altdatenbestand auch noch daten sind, die nie geupdatet werden. das ganze läuft dann schon über einen eigenen server. aber irgendwie muss ich da wahrscheinlich die struktur etwas verändern, damit das läuft  gruss bratwurstschorsch |
|
|
|
03.08.2005, 17:40
| |
| Neuer Benutzer Registriert seit: 26.07.2005
Beiträge: 23
| Hi Wenn du solche riesigen Datenmenge verwalten willst, dann solltest du dir immer nur kleine "häppchen" aus dem alten datenbestand holen und in den und mit den neuen updaten du solltest vielleicht noch eine Tabelle anlegen mit daten die nie geupdatet werden erfahrungsgemäss solltest hilft es kleinere Datenmenge zuverlässig updaten als ein riesigen bestand auf einmal
__________________ ChewyF5 -- A strange game. The only winning move is not to play -- WAR GAMES 1983 |
|
|
|
04.08.2005, 12:35
| |
| Benutzer Registriert seit: 25.10.2004
Beiträge: 43
| ja ich habe das script jetzt auch so umgeschrieben, dass immer eine zeile ausgelesen wird und dann geupdatet. danach kommt die nächste zeile usw. dadurch bekommt man kein so rießen array und das ganze geht innerhalb 1 minute |
|
|
|
04.08.2005, 16:05
| |
| Gast
Beiträge: n/a
| Na wunderbar dann geht ja alles  |
| Themen-Optionen | |
| Thema bewerten | |
|
|
Dieser Inhalt ist unter einer Creative Commons-Lizenz lizenziert.
