DevProTalk

DevProTalk (http://www.devprotalk.com/index.php)
-   Web aplikacije, web servisi i software (http://www.devprotalk.com/forumdisplay.php?f=30)
-   -   Skaliranje WPMU sajta (http://www.devprotalk.com/showthread.php?t=3099)

ivanhoe 18. 06. 2007. 11:18

Skaliranje WPMU sajta
 
Imam problem sa sajtom koji drzi blogove pod Wordpress Mu instalacijom. Broj blogova je dostigao ~6000, a to za posledicu ima nekih 60K tabela (iliti 180000 fajlova :( ) u mysql bazi. Cim poraste hit rate, baza prakticno sve vreme provodi switchujuci izmedju tabela, swapuje table cache i potpuno se smrzne posle 15-tak minuta rada. Same operacije na tabelama su vrlo brze, ali jednostavno mysql ne moze da radi istovremeno na toliko tabela i to je to.

Treba da smislim neki nacin da izbalansiram celu stvar na vise servera, sto bezbolnije, pa me zanima da li neko ima iskustva sa ovim, ili je mozda citao nesto na tu temu?

Definitivno je to moguce lepo izvesti jer WP.com i neki drugi sajtovi usluzuju ogroman broj blogova, ali nikako da nadjem precizan opis kako je to uradjeno (vecina ljudi kaze da ima reverzni proxy, nekoliko instalacija WPMU i "little custom scripting"), a meni je neophodno da znam makar okvirno koliki je to posao da bih video da li je klijent zainteresovan da investira u to, ili ce da batali celu pricu... znaci bilo kakav insider info bi mi mnogo znacio...

Goran Aničić 18. 06. 2007. 13:02

WordPress Mu platforma je ok do 10-tak blogova, ostalo je blago rečeno - problematično, sa svakog aspekta.

Citat:

Treba da smislim neki nacin da izbalansiram celu stvar na vise servera, sto bezbolnije, pa me zanima da li neko ima iskustva sa ovim, ili je mozda citao nesto na tu temu?
Rešenje ne treba tražiti u balansiranju i optimizaciji, već na migraciji na drugi sistem.

MorenoArdohain 18. 06. 2007. 13:33

Preporucujem migraciju na Lyceum, mada ces se verovatno namuciti oko toga. Pretpostavljam da ti je Lyceum vec poznat, tako da necu trositi reci.

Djuki 19. 06. 2007. 11:45

Ja preporucujem http://lifetype.com/ Nisam jos uvek stratovao sistem blogova na jednom lokalnom portalu, ali cim to uradim mogu da podelim utiske sa vama.

MorenoArdohain 19. 06. 2007. 12:29

Za razliku od Lifetype, WPMU i Lyceum su bazirani na Wordpress-u, blogerima ce biti lako da se snadju ako dodje do prelaska.

Djuki 20. 06. 2007. 08:53

Voleo bih da kazes nesto vise o Lyceum-u. Predpostavljam da on nema problem sa tabelama kao WPMU.

Na wordpres.org koriste WPMU imaju jako puno blogova (Join over 1,100,422 other bloggers…) mnogo vise od 6000, a nemaju problema kao ti, znaci nasli su neko resenje, nekako su oprimizovali WPMU.

Bas citam po WP forumu i drugi imaju dosta problema sa WPMU, ali evo par linkova mozda i pomogne ( mada verujem da si vec citao ovo ali ajd' )

http://mu.wordpress.org/forums/topic.php?id=2052
http://webdigity.wordpress.com/2006/...ysql-database/

MorenoArdohain 20. 06. 2007. 11:01

Razlika izmedju njih je u nacinu organizovanja podataka. WPMU kreira set tabela za svaki otvoreni blog, cime dolazi do pada performansi kod veceg broja usera, dok Lyceum za svaki novi blog samo dodaje nove recorde u postojece tabele (u trenutnoj verziji ih ima 13, cini mi se).

Primer uspesne implementacije Lyceuma: www.iblog.co.za

LiquidBrain 20. 06. 2007. 11:34

MySql baza je dovoljno dobra da bi mogla da izdrzi celu tu pricu, e sad
mozes da pogleas o load balancingu: www.diku.dk/publikationer/tekniske.rapporter/rapporter/03-11.pdf
a mozda te zanima i ovo:
http://dev.mysql.com/doc/refman/4.1/en/replication.html
Ako sam dobro shvatio repikacija ce ti zavrsiti posao...


Pozdrav :)

ivanhoe 20. 06. 2007. 18:54

Citat:

Originalno napisao Djuki (Napišite 37464)
Na wordpres.org koriste WPMU imaju jako puno blogova (Join over 1,100,422 other bloggers…) mnogo vise od 6000, a nemaju problema kao ti, znaci nasli su neko resenje, nekako su oprimizovali WPMU.

nisu ga optimizovali, oni koriste load balancing izmedju vece broja servera... problem sa tim pristupom je sto prvo zahteva vise servera, a pri tom ne koristi te servere adekvatno, jer meni je CPU load na serveru oko 0.1 - 0.2, samo mi je memorija ubijena jer je table cache ogroman...



Citat:

Originalno napisao LiquidBrain (Napišite 37479)
MySql baza je dovoljno dobra da bi mogla da izdrzi celu tu pricu

hmm, pa u stvari nije, mysql ne ume da efikasno radi sa 30,000 tabela u jednoj bazi, to i jeste srz problema...

Citat:

Originalno napisao LiquidBrain (Napišite 37479)
Ako sam dobro shvatio repikacija ce ti zavrsiti posao...

replikacija, pored toga sto je komplikovana da se namesti (i puca povremeno) ne resava osnovni problem da jedan mySQL server ne moze da radi sa velikim brojem tabela..

Hvala svima na trudu, u dogovoru sa klijentom smo odlucili na kraju da uzmemo jos jedan server i da deo blogova prebacimo na njega, i da onda odradimo jedan prosti switch koji ce na osnovu imena bloga da se kaci na jednu od dve baze... waste of money and CPU power, ali nisu moje pare, a ovako je ipak najbezbolnije i mozemo da zadrzimo stare pluginove u koje je ulozeno dosta truda...

moracu da sednem da napisem neki clanak o ovoj problematici kad zavrsim ovaj prelazak, pa da podelim uskustva sa ostalima...


Vreme je GMT +2. Trenutno vreme je 21:53.

Powered by vBulletin® Verzija 3.6.8
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
Copyright © DevProTalk. All Rights Reserved.

Mišljenja, saveti, izjave, ponude ili druge informacije ili sadržaji nastali na Sajtu su vlasništvo onoga ko ih je kreirao, a ne DevProTalk.com, tako da ne morate da se oslanjate na njih.
Autori poruka su jedini odgovorni za ovakve sadržaje. DevProTalk.com ne garantuje tačnost, kompletnost ili upotrebnu vrednost informacija, stavova, saveta ili datih izjava. Ne postoje uslovi pod kojima bi mi bili odgovorni za štetu ili gubitak koji je posledica bilo čijeg oslanjanja na nepouzdane informacije, ili bilo kakve informacije nastale kroz komunikaciju između registrovanih članova.
Web sajt može sadržavati linkove na druge web sajtove na Internetu ili neke druge sadržaje. Ne kontrolišemo niti podržavamo te druge web sajtove, niti smo pregledali bilo kakve sadržaje na takvim sajtovima. Mi nećemo biti odgovorni za legalnost, tačnost ili prikladnost bilo kog sadržaja, oglasa, proizvoda, usluga ili informacije lociranim na ili distribuiranih kroz druge web sajtove, niti za bilo kakvu štetu nastalu kao posledica takvih informacija. DevProTalk.com drži i čuva druga prava vlasništva na web sajtu. Web sajt sadrže materijale zaštićene copyright-om, zaštitne znakove i druge informacije o pravu vlasništva ili softver. Članovi mogu poslatu informacije zaštićene pravima vlasništva njihovih nosilaca i ona ostaju zaštićena bez obzira da li su oni koji prenose te informacije to naveli ili ne. Osim informacija koje su u javnom vlasništvu ili za koje dobijete dozvolu, nemate pravo da kopirate, modifikujete ili na bilo koji način menjate, objavljujete, prenosite, distribuirate, izvršavate, prikazujete ili prodajte bilo koju informaciju zaštićenu pravima vlasništva. Slanjem informacija ili sadržaja na bilo koji deo DevProTalk.com, Vi automatski dozvoljavate i predstavljate garanciju da imate pravo da dozvolite DevProTalk.com ili članovima DevProTalk.com bespovratnu, kontinualnu, neograničenu, globalnu dozvolu da koriste, kopiraju, izvršavaju, prikazuju i distribuiraju takve informacije i sadržaje i da iz takvih sadžaja koriste bilo koji deo u bilo koje svrhe, kao i pravo i dozvolu da koriste gore navedene sadržaje. Svi zaštitni znakovi (trademarks), logotipi, oznake usluga, firme ili imena proizvoda koji se pominju na ovom web sajtu su vlasništvo kojim raspolažu njihovi vlasnici.