SynapticPHP

Hallo Leute,

dies ist nicht wirklich ein konkretes problem, allerdings würde ich gern mal die Meinung bzw einen möglichen (gescheiten) Lösungsansatz von Programmierern hören, die damit schon Erfahrungen gemacht haben.

Ich erstelle momentan eine eigene Ranking Seite für Spiele und mir stellt sich folgende Frage:

Wir gehen davon aus, das wir massive Seitenzugriffe haben ( 400k / Tag )

Macht es denn wirklich Sinn die Daten einer Seite (50 Datensätze mit je rund 20 Information -> groß teils varchar / text aber auch ein paar Integer Daten)
nicht mit jedem Seitenaufruf aus der Datenbank abzufragen, sondern zbsp aller 1h die Informationen in eine andere Quelle zu transferieren -> zbsp eine .txt Datei und die Daten daraus zu lesen ?

Wenn es Sinn ergibt bzw die Performance steigern kann, wie stell ich das am besten an ? Habt ihr Ideen/Ratschläge oder ist das sowieso Quatsch ?

MFG Syn

Mister Ad

mepeisen

Sowas nennt man Cachen. Das was - wenn überhaupt - am Meisten Sinn macht ist das Cachen der bereits fertig generierten Webseite. Dann am besten auch so, dass sie direkt statisch als HTML vorliegt. Damit umgeht man komplett das PHP und alle dann notwendigen Zugriffe und für den Apache ist es ein simpler Dateitransfer. Sinn machen kann das schon.
Das Zwischenspeichern in eine TXT kanjn Sinn machen. In vielen Fällen macht das aber wenig Sinn, wenn das Parsen und Analysieren der TXT-Datei mehr Overhead bedeutet als der Zugriff auf die Datenbank. Eine generelle Antwort gibt es auf Performance-Fragen jedoch nie. Die Antwort kann durchaus je nach Datenkonstellationen mal so und mal anders ausfallen.

__________________
www.php-maven.org PHP und Maven vereint: Build/Deploy/Produktion/Konfiguration, Projekt Management, CI, PHPUnit, zahlreiche Frameworks
Twitter @ https://twitter.com/#!/mepeisen und Facebook @ http://t.co/DZnKSUih

SynapticPHP

Nunja, das Caching mit MYSQL kenn ich schon, allerdings find ich das nicht Optimal.
Sicher ist die abfrage beim 2.mal um einiges schneller, aber ich hoffte es geht noch besser.

Das fertige generieren ist eine Möglichkeit, allerdings hatte ich nicht vor rund 30 000 seiten zu generieren.
Pro Spiel werden im Durchschnitt schon 300 Server angemeldet(bei einigen auch mehr), diese müssen im jeweiligem Ranking, der
eigenen Site Statistik und im ControlPanel auftauchen.

Es sind 10 Kategorien mit ca 30 Spielen geplant und das erstellen der HTML Files stell ich mir auch sehr
Performancelastig vor bei solch einer enormen Anzahl von Seiten.

Schonmal danke für die Antwort.

MasterD

Die Seite wird bei jedem Aufruf geparst und im cache anschließend zwischengespeichert, du musst dazu nicht alle seiten auf einmal generieren.

Lies dir mal noch ein paar sachen dazu durch

mepeisen

Es gibt beispielsweise die Möglichkeit, die Seiten als HTML abzuspeichern und (so sie nicht existieren) per htaccess redirect auf ein PHP-Script zu verweisen, die sie berechnet und wiederum abspeichert. Beim Aktualisieren müsste man die Seiten dann nur löschen.

__________________
www.php-maven.org PHP und Maven vereint: Build/Deploy/Produktion/Konfiguration, Projekt Management, CI, PHPUnit, zahlreiche Frameworks
Twitter @ https://twitter.com/#!/mepeisen und Facebook @ http://t.co/DZnKSUih

SynapticPHP

Wenn er sie bei jedem Aufruf parst, muss er doch auch bei JEDEM aufruf die Informationen besorgen oder verstehe ich da was falsch?
Das ist genau das was ich nicht will, weil sonst könnte ich ja auch mit nem PHP script jedes mal abfragen und echo <<< HTML - HTML;

Mir ist noch eine Idee bezüglich des MYSQL Caches gekommen.
Soweit ich weiß (?) werden die Daten bei der selben abfrage aus dem
Cache genommen, sofern sich nichts an den Daten geändert hat.

Nun kann ich (?) doch einfach dies so lassen, und einfach die neuigkeiten im 30 Minuten intervall erst in die Tabelle übertragen/aktualisieren.

Im Format:

Haupt Tabellen -> Ausgabe (Oft, Viele Datensätze)
Slave Tabelle -> Eingabe (Selten + wenige Daten)

Nun wir nur aller 30 Minuten - 1h die daten der Slave Tabelle auf die
eigentliche übertragen. Wäre das so Sinnvoll ?

mepeisen

Hilfe, ich werd ignoriert. Und MasterD hast du falsch verstanden. Er meinte sicher nicht den Browser-Cache Lies dir meinen letzten Beitrag von 14 Uhr nochmal durch.

__________________
www.php-maven.org PHP und Maven vereint: Build/Deploy/Produktion/Konfiguration, Projekt Management, CI, PHPUnit, zahlreiche Frameworks
Twitter @ https://twitter.com/#!/mepeisen und Facebook @ http://t.co/DZnKSUih

SynapticPHP

Ich weiß schon das kein Browser Cache gemeint war, nur ich denke für mein vorhaben eignet sich das Parsen nicht wirklich.

mepeisen

Ich habe nichts von parsen geschrieben.

__________________
www.php-maven.org PHP und Maven vereint: Build/Deploy/Produktion/Konfiguration, Projekt Management, CI, PHPUnit, zahlreiche Frameworks
Twitter @ https://twitter.com/#!/mepeisen und Facebook @ http://t.co/DZnKSUih

jspit

Beim Cachen wird das Alter der hier HTML-Datei mit einbezogen. Also beim Aufruf der Seite nachschauen, ob HTML vorhanden und nicht älter als z.B. 20 min. Wenn ja, die HTML rausschleudern. Nur wenn die Seite nicht vorhanden ist oder zu alt, muß sie neu erstellt werden.
d.h. max alle 20 min genau 1x für jede Seite, wenn diese keiner aufruft gar nicht.