程序師世界是廣大編程愛好者互助、分享、學習的平台,程序師世界有你更精彩!
首頁
編程語言
C語言|JAVA編程
Python編程
網頁編程
ASP編程|PHP編程
JSP編程
數據庫知識
MYSQL數據庫|SqlServer數據庫
Oracle數據庫|DB2數據庫
 程式師世界 >> 編程語言 >> 網頁編程 >> PHP編程 >> 關於PHP編程 >> PHP大批量插入數據庫的3種方法和速度對比,php數據庫3種

PHP大批量插入數據庫的3種方法和速度對比,php數據庫3種

編輯:關於PHP編程

PHP大批量插入數據庫的3種方法和速度對比,php數據庫3種


第一種方法:使用insert into 插入,代碼如下:

$params = array(‘value'=>'50′);
set_time_limit(0);
echo date(“H:i:s”);
for($i=0;$i<2000000;$i++){
$connect_mysql->insert($params);
};
echo date(“H:i:s”);

最後顯示為:23:25:05 01:32:05 也就是花了2個小時多!

第二種方法:使用事務提交,批量插入數據庫(每隔10W條提交下)最後顯示消耗的時間為:22:56:13 23:04:00 ,一共8分13秒  ,代碼如下:

echo date(“H:i:s”);
$connect_mysql->query(‘BEGIN');
$params = array(‘value'=>'50′);
for($i=0;$i<2000000;$i++){
$connect_mysql->insert($params);
if($i%100000==0){
$connect_mysql->query(‘COMMIT');
$connect_mysql->query(‘BEGIN');
}
}
$connect_mysql->query(‘COMMIT');
echo date(“H:i:s”);

第三種方法:使用優化SQL語句:將SQL語句進行拼接,使用 insert into table () values  (),(),(),()然後再一次性插入,如果字符串太長,

則需要配置下MYSQL,在mysql 命令行中運行 :set global max_allowed_packet =  2*1024*1024*10;消耗時間為:11:24:06 11:25:06;

插入200W條測試數據僅僅用了1分鐘!代碼如下:

$sql= “insert into twenty_million (value) values”;
for($i=0;$i<2000000;$i++){
$sql.=”('50′),”;
};
$sql = substr($sql,0,strlen($sql)-1);
$connect_mysql->query($sql);

最後總結下,在插入大批量數據時,第一種方法無疑是最差勁的,而第二種方法在實際應用中就比較廣泛,第三種方法在插入測試數據或者其他低要求時比較合適,速度確實快。


php 大量向mysql數據庫插入數據最快的方法

一次性插入1000條數據比一條一條的插入速度會提升N倍,主要技巧就是在寫SQL的上面,沒啥難度
insert into table1 value (v1, v2, v3), (x1,x2,x3),....

而不是
insert into table1 value (v1, v2, v3);
insert into table1 value (x1,x2,x3);
這樣一條一條的插入
希望你能明白
參考資料:牛人小海
 

php,mysql,大批量的excel數據怎導入數據庫?之前我錄數據也是這種方式,先轉化成cs

關於csv格式
如果內容中有逗號,可以把整個字段用引號括起來,具體可參考百度百科csv。
例如
字段1,“字段2帶,號”,字段3

其實,關鍵在於php讀取csv的規則,csv並不是一定要用逗號,也可以是分號等其他符號。
改一下對應的php讀取規則即可。
 

  1. 上一頁:
  2. 下一頁:
Copyright © 程式師世界 All Rights Reserved