bendigo

hallo

kann mir da einer einen tipp geben wie ich meine sache besser löse.

ich habe einen Datentransfer vom MySQL-Server zu Access - Clients.

Leitung:
1024 Upload des Servers
von den Client´s
ca. 1024 Download

Ich habe die Tabellen vom MySQL - Server per ODBC eingebunden (die Indizesse sind richtig gesetzt)

Jetzt muss sicher der Client pro Tag ca. 100.000 Datensätze abholen. Hier ist der Knackpunkt --> es dauert einfach viel zu lange.

Gibt es hier eine andere Lösung?

Als Info:
Die Tabelle auf den SQL-Server hat ca. 12.000.000 Datensätze.

mfg
pascal

Mister Ad

Sclot

hui.. is ja doch schon ne ganze menge...

bendigo

eben ??? und gibt es ne lösung

Sclot

also du kannst nicht mit mehren clients auf einem mysql server über ODBC connecten und erwarten das das dann sau schnell läuft.

ich wollte sowas auch mal machen, habs dann aber aufgegeben...
ich lass jetzt die mysql daten in eine sqlite datenbank schrieben und lokal beim clienten mit access über den sqlite-odbc treiber öffnen.

das is schnell

nun weiss aber kein mensch was genau du vor hast.

bendigo

@Sclot

Was ich vor habe:
Auf meinen mySQL - Server werden täglich Daten per php-script auf den Server geschrieben (handle ich alles per CronTab) --> das funktioniert auch sehr gut.

Leider, wie du auch schon gesagt hast, habe ich Probleme die Daten über die ODBC Schnittstelle zu schicken. --> das schaut so aus: Clients haben per ODBC Tabellen in ihrer localen Access DB eingebunden und können somit die Daten von ihrer localen Access DB updaten.
Somit läuft bei mir: Ein Insert Into oder Update vom SERVER zu Access Tabellen.

Hier habe ich die Probleme das es zu langsam geht.

Ein Beispiel:
Auf dem Server liegen 12.000.000 Datensätze in der Tabelle "Test" jetzt sollten 100.000 Datensätze an eine Access Tabelle per Insert Into geschrieben werden.

__________________________________________________ _________________
ist es so verständlich????

aber jetzt zu deiner variante --> SQLite -- noch nie davon gehört hab jetzt im google ein bischen nachgelesen aber werde nicht ganz schlau aus diesem System.

(SQLite ist eine Programmbibliothek die ein relationales Datenbanksystem beinhaltet. ....)

So ist SQLite ein eigener Server oder ???? --> wie der mySQL Server gibt es ein SQLite - Server ist das Richtig???

gruss
pascal

Sclot

nein ist nicht richtig

sqlite ist praktisch ein wrapper mit dem du eine stinknormale txt datei als sql datenbnak ansprechen kannst.

schwer zu erklären wenn man nur mysql kennt

also.. beispiel php:
im php hast du funktionen um auf dem mysql server zugreifen zu können.
dazu muss der mysql server an sein weild er ja die datenbanken verwaltet.
ist der mysqls erver aus, kannst auch nichts mit datenbnaken machen.

sqlite in php ist direkt im php drin ohne das du einen weiteren server brauchst.
also arbeitest du mit php direkt auf den sqlite datenbanken.
eine sqlite datenbnak ist aber im prinzip auch nur eine einzige txt datei wo die daten alle drin stehen.

normal würde man jetzt sagen: mit php in text dateien rumfummeln? und dann noch mit tausenden von datensätzen? wasn das fürn schwachsinn?!?

aber.. da die interne strunktur vom sqlite ziemlich gut geschrieben ist, kann man wohl auf normalen dateisystem problemlos auf datenbnaken bis zu 4GB zufreifen.


ok.. wenn sqlite jetzt so toll ist.. wozu brauch ich dann noch mysql?
naja.. bei den meisten kommerziellen histern ist sqlite nicht im php mit einkompiliert, weil die ihre mysql datenbanken los werden wollen...
andererseits ist sqlite wied er name schon sagt nur ein "lite-sql" - also mit einem sehr verminderten funktionsumfang von dem was mysql oder gar postgres kann.


also.. schau dir sqlite mal an, es lohnt sich.
ja.. wenn du damit was anfangen kannst schreibst du dir die daten die du brauchst in die sqlite datenbnk, lädst sie auf dienen client runter und öffnest sie im access über odbc lokal

bendigo

werde ich mir jetzt mal anschauen sollte helfen. noch eine frage -- ist irgendwie möglich sonst aus dem mysql eine textdatei zu erstellen?????

wäre das auch eine lösung: ich arbeite mit ssh somit kann bei mir jeder client ein php - script auf dem server ausführen -- jetzt könnte das php script ja eine txt-datei erstellen sie zipen und der client hollt sie dann ab. (aber die frage ist nur wann kann er sie abhollen)

so richtig ist diese lösung auch nicht. --> schau mir mal sqlite an

gruss
pascal

Sclot

kannst dir das auch alles in eine txt datei schreiben

bendigo

aber die frage ist immer wie -- geht mein prinzip von oben????

gruss
pascal

Sclot

warum sollte es nicht gehen?