前言:
在PHP+MySQL架構的站點中,本文重點從MySQL的角度去分析如何使Discuz!論壇(或者類似的PHP+MySQL架構的程序)應對大訪問量。同時給出一些使用Memcache去減輕MySQL壓力的建議。其中很多數據是個人測試的結果,如有不同意見,敬請留言告之。另外由於個人思維的問題,行文比較跳躍,特此聲明!
系統分析:
單純的從MySQL的角度出發,單台MySQL的數據庫負載到每天上億次的操作(每秒大概1100次MySQL操作,然後乘以86400)應該不是非常困難的事情。按照這個數據也就是說一個單MySQL服務器的論壇來說可以跑到2千萬PV是不成問題的,我相信國內絕大部分的論壇都不可能做到每天2千萬的PV,但實際情況並不是如此。當論壇PV超過百萬的時候一台WEB早已經不堪重負了。
就我手頭的一些數據顯示,目前的Discuz!論壇的基本服務器架構是前面Squid頂著,後面才是一台DB在撐著。這種架構中,web服務器壓力增大可以通過並行增加服務器解決,而MySQL壓力卻無處釋放,在不考慮MySQL官方服務的情況下,我們通過合理的利用Memcache是可以達到減輕MySQL服務器負載的。
可能會有朋友說我們可以對數據表進行分表(注:此處分表是指通過PHP程序去分表,比如pw,dv的分表)處理,但是當前的情況是一台DB服務器已經不能支撐當前的數據處理了,通過PHP對MySQL進行的分表依然不能減輕MySQL的負載。(注:本段文字針對已經成型的系統,如果是獨立開發的系統在架構前期就進行數據的同步分區還是不錯的。)
還可能有朋友會說利用MySQL的主從構架,如果你提出這個問題,我就很明確的告訴你,回去看看手冊吧。在Mysql Master/Slave 模式中,Slave主要是來備份數據的,只有當Master出現故障時,Slave才會接過Master的服務,對外部請求進行處理,直到Master恢復正常。就是說:在Master/Slave中,要麼是Master在服務,要麼是Slave在服務,不會Master/Slave同時提供服務。使用MySQL主從依然不能有效的降低MySQL的負載。
或許你又會問我為什麼不使用MySQL集群(MySQL Cluster),那可是白花花的銀子啊,同等金錢的付出下,獲得最大的收益才是王道。PS:說句題外話,MySQL手冊中將MySQL集群解釋為MySQL簇,不習慣。
其實在MySQL5.1中的MySQL分區(MySQL Partition)是個很好的東西,它允許根據可以設置為任意大小的規則,跨文件系統分配單個表的多個部分。實際上,表的不同部分在不同的位置被存儲為單獨的表。我認為這個才是當前情況下,最積極有效的降低MySQL負載的解決方法之一。但是遺憾的是,這種MySQL分區的方式我個人沒有使用過的經歷,也不見有相當充分的案例表明它是穩定的或者不穩定的。所以我還在徘徊中。如果你知道,請麻煩告之!有朋友說騰訊是在用MySQL分區,但是遺憾的是我沒有得到確切的數據。
好了分析總結了這麼多種降低MySQL負載的方式之後,在用戶環境需求等特定條件下,我得出結論在當前情況下,緩解Discuz!論壇的MySQL負載比較有效的方法就是使用Memcache!
使用Memcache的理由:
1.Web Server(Lighttpd、Nginx據說都比Apache效率高好多,大家可以試用下)對CPU要求高,對內存要求低;而Memcached Server是對CPU要求低,對內存要求高,所以可以搭配使用。在對前端的Web Server上安裝Memcached Server是可行的。
2.金錢金錢金錢,最少的付出,獲得最大的收益。
3.簡單簡單簡單,對於一個架構合理的系統來說,添加Memcache的支持可能只是一個批量處理文件的過程
Discuz!使用Memcache
1.在config.inc.php中增加
2.在include/common.inc.php中
$mem = new Memcache;3.修改include/db_mysql.class.php中的fetch_array、query這兩個方法,並添加query_mysql方法,代碼如下:
function fetch_array($query, $result_type = MYSQL_ASSOC) {4.將需要使用Memcache緩存的SQL查詢的代碼由
$db->query(修改為
$db->query_memcache(注意並將
while($post = $db->fetch_array($query)) {修改為
foreach($query as $post) {沒有while的$db->fetch_array可以不用修改。
下面代碼有用得著的就拿去:
preg_replace("/while\([$](\w+)\s*\=\s*[$]db->fetch_array\([$]query\)\)/is", "foreach(\$query as \$\\1)", $file);回頭放出個小工具批量替換下就可以了。
在EditPlus中可以這樣替換:while\([$](.*) = [$]db->fetch_array\([$]query\)\)替換為foreach($query as $\1)
5.完成了,測試吧!~