當數據量猛增的時候,大家都會選擇庫表散列等等方式去優化數據讀寫速度。筆者做了一個簡單的嘗試,1億條數據,分100張表。具體實現過程如下:
首先創建100張表:
1 $i=0; 2 while($i<=99){ 3 echo "$newNumber \r\n"; 4 $sql="CREATE TABLE `code_".$i."` ( 5 `full_code` char(10) NOT NULL, 6 `create_time` int(10) unsigned NOT NULL, 7 PRIMARY KEY (`full_code`), 8 ) ENGINE=MyISAM DEFAULT CHARSET=utf8"; 9 mysql_query($sql); 10 $i++;
下面說一下我的分表規則,full_code作為主鍵,我們對full_code做hash
函數如下:
1 $table_name=get_hash_table('code',$full_code); 2 function get_hash_table($table,$code,$s=100){ 3 $hash = sprintf("%u", crc32($code)); 4 echo $hash; 5 $hash1 = intval(fmod($hash, $s)); 6 return $table."_".$hash1; 7 }
這樣插入數據前通過get_hash_table獲取數據存放的表名。
最後我們使用merge存儲引擎來實現一張完整的code表
1 CREATE TABLE IF NOT EXISTS `code` ( 2 `full_code` char(10) NOT NULL, 3 `create_time` int(10) unsigned NOT NULL, 4 INDEX(full_code) 5 ) TYPE=MERGE UNION=(code_0,code_1,code_2.......) INSERT_METHOD=LAST ;
這樣我們通過select * from code就可以得到所有的full_code數據了。