Skaliranje WPMU sajta

[ivanhoe]

Imam problem sa sajtom koji drzi blogove pod Wordpress Mu instalacijom. Broj blogova je dostigao ~6000, a to za posledicu ima nekih 60K tabela (iliti 180000 fajlova ) u mysql bazi. Cim poraste hit rate, baza prakticno sve vreme provodi switchujuci izmedju tabela, swapuje table cache i potpuno se smrzne posle 15-tak minuta rada. Same operacije na tabelama su vrlo brze, ali jednostavno mysql ne moze da radi istovremeno na toliko tabela i to je to.

Treba da smislim neki nacin da izbalansiram celu stvar na vise servera, sto bezbolnije, pa me zanima da li neko ima iskustva sa ovim, ili je mozda citao nesto na tu temu?

Definitivno je to moguce lepo izvesti jer WP.com i neki drugi sajtovi usluzuju ogroman broj blogova, ali nikako da nadjem precizan opis kako je to uradjeno (vecina ljudi kaze da ima reverzni proxy, nekoliko instalacija WPMU i "little custom scripting"), a meni je neophodno da znam makar okvirno koliki je to posao da bih video da li je klijent zainteresovan da investira u to, ili ce da batali celu pricu... znaci bilo kakav insider info bi mi mnogo znacio...

[Goran Aničić]

WordPress Mu platforma je ok do 10-tak blogova, ostalo je blago rečeno - problematično, sa svakog aspekta.

Treba da smislim neki nacin da izbalansiram celu stvar na vise servera, sto bezbolnije, pa me zanima da li neko ima iskustva sa ovim, ili je mozda citao nesto na tu temu?

Rešenje ne treba tražiti u balansiranju i optimizaciji, već na migraciji na drugi sistem.

[MorenoArdohain]

Preporucujem migraciju na Lyceum, mada ces se verovatno namuciti oko toga. Pretpostavljam da ti je Lyceum vec poznat, tako da necu trositi reci.

[Djuki]

Ja preporucujem http://lifetype.com/ Nisam jos uvek stratovao sistem blogova na jednom lokalnom portalu, ali cim to uradim mogu da podelim utiske sa vama.

[MorenoArdohain]

Za razliku od Lifetype, WPMU i Lyceum su bazirani na Wordpress-u, blogerima ce biti lako da se snadju ako dodje do prelaska.

[Djuki]

Voleo bih da kazes nesto vise o Lyceum-u. Predpostavljam da on nema problem sa tabelama kao WPMU.

Na wordpres.org koriste WPMU imaju jako puno blogova (Join over 1,100,422 other bloggers…) mnogo vise od 6000, a nemaju problema kao ti, znaci nasli su neko resenje, nekako su oprimizovali WPMU.

Bas citam po WP forumu i drugi imaju dosta problema sa WPMU, ali evo par linkova mozda i pomogne ( mada verujem da si vec citao ovo ali ajd' )

http://mu.wordpress.org/forums/topic.php?id=2052
http://webdigity.wordpress.com/2006/...ysql-database/

[MorenoArdohain]

Razlika izmedju njih je u nacinu organizovanja podataka. WPMU kreira set tabela za svaki otvoreni blog, cime dolazi do pada performansi kod veceg broja usera, dok Lyceum za svaki novi blog samo dodaje nove recorde u postojece tabele (u trenutnoj verziji ih ima 13, cini mi se).

Primer uspesne implementacije Lyceuma: www.iblog.co.za

[LiquidBrain]

MySql baza je dovoljno dobra da bi mogla da izdrzi celu tu pricu, e sad
mozes da pogleas o load balancingu: www.diku.dk/publikationer/tekniske.rapporter/rapporter/03-11.pdf
a mozda te zanima i ovo:
http://dev.mysql.com/doc/refman/4.1/en/replication.html
Ako sam dobro shvatio repikacija ce ti zavrsiti posao...


Pozdrav

[ivanhoe]

Originalno napisao Djuki

Na wordpres.org koriste WPMU imaju jako puno blogova (Join over 1,100,422 other bloggers…) mnogo vise od 6000, a nemaju problema kao ti, znaci nasli su neko resenje, nekako su oprimizovali WPMU.

nisu ga optimizovali, oni koriste load balancing izmedju vece broja servera... problem sa tim pristupom je sto prvo zahteva vise servera, a pri tom ne koristi te servere adekvatno, jer meni je CPU load na serveru oko 0.1 - 0.2, samo mi je memorija ubijena jer je table cache ogroman...

Originalno napisao LiquidBrain

MySql baza je dovoljno dobra da bi mogla da izdrzi celu tu pricu

hmm, pa u stvari nije, mysql ne ume da efikasno radi sa 30,000 tabela u jednoj bazi, to i jeste srz problema...

Originalno napisao LiquidBrain

Ako sam dobro shvatio repikacija ce ti zavrsiti posao...

replikacija, pored toga sto je komplikovana da se namesti (i puca povremeno) ne resava osnovni problem da jedan mySQL server ne moze da radi sa velikim brojem tabela..

Hvala svima na trudu, u dogovoru sa klijentom smo odlucili na kraju da uzmemo jos jedan server i da deo blogova prebacimo na njega, i da onda odradimo jedan prosti switch koji ce na osnovu imena bloga da se kaci na jednu od dve baze... waste of money and CPU power, ali nisu moje pare, a ovako je ipak najbezbolnije i mozemo da zadrzimo stare pluginove u koje je ulozeno dosta truda...

moracu da sednem da napisem neki clanak o ovoj problematici kad zavrsim ovaj prelazak, pa da podelim uskustva sa ostalima...