Ich habe ein etwas ungewöhnliches Problem.

Ich ziehe von einem FTP Server eine mit gzip gepackte Datei und möchte diese entpacken. Das Problem: Die gepackte Datei ist knapp 100 MB groß und ergiebt eine 1 GB große XML Datei.

Wenn ich versuche, die Datei mit gzread zu entpacken, entpackt er mir sie nur teilweise (abhängig von der Anzahl der angegebenen Bytes). Ich kann aber nicht mehr Bytes als das PHP Speicherlimit bietet zur Verfügung stellen, da das Script sonst abbricht. Gibt es eine Möglichkeit, die gepackte Datei zeilenweise zu entpacken und in die Zieldateidatei zu schreiben?

Mister Ad

robo47

du wilslt sie lokal auf deinem rechner entpacken oder auf nem webserver ?
hast du shellzugriff ?

__________________
robo47.net - Blog, Codeschnipsel und mehr
| Caching-Klassen und Opcode Caches in php | Robo47 Components - PHP Library extending Zend Framework

Das ganze läuft auf einem Webserver. Entpacken mit Shell ist kein Problem, ich will sie aber explizit in PHP entpacken, damit das Script Cronjobgesteuert automatisch laufen kann.

robo47

öhm??
wenn du unbedingt nen php-cron willst:
exec('dein shell entpackungsbefehl >> /dein/error/log/')

? abgesehen davon kann man auch andere sachen als php via cronjob ausführen? warum php für etwas benutzen wofür es in dem sinne nicht geeignet ist ?

__________________
robo47.net - Blog, Codeschnipsel und mehr
| Caching-Klassen und Opcode Caches in php | Robo47 Components - PHP Library extending Zend Framework

PHP ist explizit vorgegeben, leider. Ich hätte dafür lieber ein kleines C++ Programm geschrieben

robo47

und was spricht dagegen über php mittels exec ein shell-programm auszuführen ? unter linux ist das ja eigentlich standardmäßig dabei :P.

Und explizite Vorgaben sind nunmal Bockmist :P Und wenn die Leute nicht mit sich reden lassen oder sich nicht damit auskennen, sollten sie halt wenigstens nen server hinstellen (was schwachfug ³ wäre) wo php genügend speicher nutzen darf .... :P warum immer mit kanonen auf spatzen schießen ?

naja
ne andere lösung fällt mir nicht ein :P

__________________
robo47.net - Blog, Codeschnipsel und mehr
| Caching-Klassen und Opcode Caches in php | Robo47 Components - PHP Library extending Zend Framework

Dagegen spricht nichts, ich wusste nur nicht, das sich per PHP Shell Aufruf das PHP Speicherlimit umgehen lässt.

Hab es gerade getestet, funktioniert 1a.

Vielen Dank für die Hilfe.

robo47

hmm stellt isch auch die frage, ob das shell-programm so viel speicher braucht? mein winrar braucht beim entpacken von nem 2GB-tar-archiv ja auch keine 2GB speicher.
hab imho winrar noch nie mit mehr als 20 MB verbrauch gesehen ...

__________________
robo47.net - Blog, Codeschnipsel und mehr
| Caching-Klassen und Opcode Caches in php | Robo47 Components - PHP Library extending Zend Framework