FreAkaZoiD

Hallo zusammen,

Ich habe 2 Server und möchte nun als Backup alle Daten der DB1 auf Server1 mit DB2 auf Server2 abgleichen.

Die Suche im Forum hat mir leider nur das ausgespuckt...

Meine Überlegung wäre bisher einen Cronjob aufzurufen, welcher zuerst die letzte id der Backuptabelle ausliest - danach wollte ich mittels file_get_contents() die neuen Datensätze auslesen, und diese in Schleife und auch wieder mit file_get_contents() an ein Script übergebe, welches mir die Daten dann wieder in die Backup-DB reinspielt.

Leider kommt mir das ganze vor als ob ich mit der Tür ins Haus falle,
eine bessere Idee habe ich jedoch z.Zt. leider nicht *achselnzuck* *grübel*

und genau da kommt ihr ins Spiel

>> schubst mich doch mal bitte wieder in die richtige Richtung!

Mister Ad

MerlinderZauberer

Hallo FreAkaZoiD,

ich habe eine ähnliche Konstellation.

Ich selber und User erstellen für eine astronomische Homepage Daten auf dessen Datenbankserver.

Diese gesammelten Daten verwende ich für meine eigene Homepage. Dazu ist es notwendig, die entsprechenden Tabellen auf meiner Datenbankserver zu duplizieren.

Ich habe mir dafür eine Klasse erstellt, die funktionell mit verschiedenen Tabellen diese Aufgabe erledigt. Angestoßen wird das ganze durch ein Cronjob.

Mein PHP-Script bestreitet dabei folgenden Weg:
1. Verbindung mit Datenbank A
2. Auslesen jeder Tabelle inkl. Daten von Datenbank A und speichern als SQL-Dump
3. Verbindung mit Datenbank B
4. Zeilenweise lesen des SQL-Dump und speichern in einem Array
5. Ausführung des Array mit dem SQL-Statment "Update".

Dabei möchte ich folgendes bemerken:
Da meine Tabellen sehr groß sind, lese ich jeweils aus den Tabellen z.B. 20000 Datensätze aus und speichere diese dann anhängend in meinem SQL-Dump.
Beim Import Verfahre ich in umgekehrter Reihenfolge. Lesen von 20000 Datensätze und dann zur Datenbank schicken.
Mit diesen Zwischenschritt vermeide ich, das der Datenspeicher nicht mehr ausreicht.

Schöne Grüße

Merlin der Zauberer

__________________
www.Sternenwelt.net - Astronomie im Internet -
www.SternenweltForum.net - Antworten rund um die Astronomie -

Slava

Es gibt eigentlich standardlösungen für solche probleme, besonders wenn das schon von anfang an geplant war.
man erstellt eine Observer-Tabelle in der jede änderung in tabellen erfasst wird.
das verlangt natürlich, dass jede delete,update und insert in Observer-Tabelle abgespeichert wird.
Tabelle Ovserver
id|database|table|operation set('delete','update','insert') |key_name|key_value|timestamp

teilweise müssen die sql-abfragen die Tabelle verändern angepasst werden, aber viele sachen kann man über Triger und Proceduren erledigen.
in jedem fall wird bei den grösseren Tabellen die suche auf die veränderte datensätze nach datum sehr schnell.

Alternative:
Bei den Datenbanken, die mit wichtigen daten gefühlt sind, wird eigentlich schon von anfang die update, delete, und insert zeitlich erfasst.

bei delete: wird die zeile in einem zusatzfeld einfach als delete markirt und timestamp von delete eingefügt

bei insert: zeitstempel in einem zusatzfeld eingefügt.

bei update:
kopiert man erst der inhalt, der verändert wird in eine extra-tabelle mit dem zeitstempel
danach werden die zeilen verändert und gleichzeitig in einem extra-feld update-timestamp eingefügt.

Diese Massnamen verlangsamen datenbank bei insert, update und delete, aber dafür hat man volle kontrolle über die veränderungen.
Also es ist danach ein Kinderspiel alle datensätze die ab datum X verändert wurden zu finden und auf ein anderen Dbserver zu importieren.

schau dir auch das mal an: http://dev.mysql.com/doc/refman/5.0/en/query-log.html

__________________
Slava
http://bituniverse.com

FreAkaZoiD

Hi zusammen,

Vielen Dank für eure Hilfe!

@Merlin: Hast Du die Klasse irgendwo freigegeben ?
@Slava: Genialer Hinweis - leider arbeite ich hier i.d.R. an großen bestehenden Systemen. Aber für meine eigenen Projekte werd ich das mal übernehmen

LG, und sorry für den delay!

MerlinderZauberer

Hallo FreAkaZoiD,

die von mir erstellte Klasse ist zur Zeit noch experimentel. Ich weiss nicht, ob Dir das reicht?

Merlin der Zauberer

__________________
www.Sternenwelt.net - Astronomie im Internet -
www.SternenweltForum.net - Antworten rund um die Astronomie -

FreAkaZoiD

Guten Morgen Merlin,

Danke für die Antwort, jedoch kenn ich mich mit Klassen überhaupt nicht aus, und könnte das dann nicht mal auf meine Bedürfnisse anpassen...

LG

MerlinderZauberer

Kennst Du Dich mit Funktionen aus?

In dieser weise musst Du Dir vorstellen, das meine Klasse instanziert wird und die enrsprechende Funktionalität zur Verfügung steht.

Gruß

Merlin der Zauberer

__________________
www.Sternenwelt.net - Astronomie im Internet -
www.SternenweltForum.net - Antworten rund um die Astronomie -