PHP mysql大批量插入數(shù)據(jù)庫的3種方法和速度對比

第一種方法:使用insert into 插入,代碼如下:

$params = array('value'=>'50′);

set_time_limit(0);

echo date("H:i:s");

for($i=0;$i<2000000;$i++){

$connect_mysql->insert($params);

};

echo date("H:i:s");

最后顯示為:23:25:05 01:32:05 也就是花了2個小時多!

第二種方法:使用事務提交,批量插入數(shù)據(jù)庫(每隔10W條提交下)最后顯示消耗的時間為:22:56:13 23:04:00 ,一共8分13秒 ,代碼如下:

echo date("H:i:s");

$connect_mysql->query('BEGIN');

$params = array('value'=>'50′);

for($i=0;$i<2000000;$i++){

$connect_mysql->insert($params);

if($i%100000==0){

$connect_mysql->query('COMMIT');

$connect_mysql->query('BEGIN');

}

}

$connect_mysql->query('COMMIT');

echo date("H:i:s");

第三種方法:使用優(yōu)化SQL語句:將SQL語句進行拼接,使用 insert into table () values (),(),(),()然后再一次性插入,如果字符串太長,

則需要配置下MYSQL,在mysql 命令行中運行 :set global max_allowed_packet = 210241024*10;消耗時間為:11:24:06 11:25:06;

插入200W條測試數(shù)據(jù)僅僅用了1分鐘!代碼如下:

$sql= "insert into twenty_million (value) values";

for($i=0;$i<2000000;$i++){

$sql.="('50'),";

};

$sql = substr($sql,0,strlen($sql)-1);

$connect_mysql->query($sql);

最后總結(jié)下,在插入大批量數(shù)據(jù)時,第一種方法無疑是最差勁的,而第二種方法在實際應用中就比較廣泛,第三種方法在插入測試數(shù)據(jù)或者其他低要求時比較合適,速度確實快。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。