sqlite一次插入多條記錄的優化方法

Date: 2014-08-09
Summary: 有大量的數據要插入數據庫,但是每次只寫入一條在速度上很難接受。本文介紹了在sqlite數據庫中一次插入多條記錄的優化方法。

sqlite一次插入多條記錄的優化方法

問題

今天在使用sqlite向表中插入數據的時候發現,對于一次插入多條記錄的問題來說,insert into的執行速度慢到了無法接受。我在實際的使用中,想一次性插入200條記錄,要做1000次左右的插入,這樣的話,我每次都要把200條記錄的插入語句組織成一個長字符串,然后執行一次executeUpdate語句。沒想到插入操作這么慢,只好請教搜索引擎,看有沒有什么好辦法。

試驗

答案當然是有的。因為我一直使用的sql語句是類似MySQL的:

INSERT INTO 'tablename' ('column1', 'column2') VALUES
('data1', 'data2'),
('data1', 'data2'),
('data1', 'data2'),
('data1', 'data2');

根據網友的回復,只需要使用不同的語法,在SQLite中把插入語句重寫成:

INSERT INTO 'tablename'
SELECT 'data1' AS 'column1', 'data2' AS 'column2'
UNION SELECT 'data3', 'data4'
UNION SELECT 'data5', 'data6'
UNION SELECT 'data7', 'data8'

我把原來的代碼改成新的代碼以后,發現速度明顯是快多了!簡單做了一下測試,原來的方法做10次插入操作,每次寫入如200條數據已經需要222137ms,新的方法做同樣的操作只需要1841ms,這到底是什么節奏?

查看了一下SQLite的官方文檔,原來insert 還真有這種用法的。

SQLite insert

sqlite insert

而且官方文檔上面很明確的說明,insert語句有三種基本的形式,但是性能上為什么會有如此大的差別?這個還真是沒有想明白。。。

怎樣檢查一個表是否存在

另外順便記一下,在SQLite中查詢一個表是否存在的方法:

SELECT name FROM sqlite_master WHERE type='table' AND name='table_name';

table_name就是傳進去要查找的表的名字,當然也可以不要。這個語句會返回數據庫中的表名字哦!

參考

http://stackoverflow.com/questions/1609637/is-it-possible-to-insert-multiple-rows-at-a-time-in-an-sqlite-database/1734067#1734067

http://stackoverflow.com/questions/1601151/how-do-i-check-in-sqlite-whether-a-table-exists

http://www.sqlite.org/lang_insert.html

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 229,885評論 6 541
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 99,312評論 3 429
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 177,993評論 0 383
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,667評論 1 317
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 72,410評論 6 411
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,778評論 1 328
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,775評論 3 446
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,955評論 0 289
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 49,521評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 41,266評論 3 358
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 43,468評論 1 374
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,998評論 5 363
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,696評論 3 348
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 35,095評論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,385評論 1 294
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 52,193評論 3 398
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 48,431評論 2 378

推薦閱讀更多精彩內容

  • 說明 本文是作者Lefe所創,轉載請注明出處,如果你在閱讀的時候發現問題歡迎一起討論。本文會不斷更新。 正文 對于...
    Lefe閱讀 3,967評論 1 18
  • 移動客戶端中高效使用 SQLite 轉發自 2016-08-18趙豐騰訊Bugly 導語 iOS 程序能從網絡獲取...
    樹懶啊樹懶閱讀 1,917評論 1 19
  • 這個SQLite快速入門教程教你如何有效地開始學習并使用SQLite。通過本教程的實踐操作學習之后,相信你應該可以...
    易百教程閱讀 36,066評論 1 67
  • 轉載,覺得這篇寫 SQLAlchemy Core,寫得非常不錯。不過后續他沒寫SQLAlchemy ORM... ...
    非夢nj閱讀 5,455評論 1 14
  • 美秀已經是小學最后一學期了,當她老師一年半,很感謝這個機會雖(然其中有很多次不想繼續),課本沒變,看到課本會回想起...
    糯米飯有點軟閱讀 172評論 0 0