SQLITE3插入大量數(shù)據(jù)而涉,效率翻百倍

用SQLITE插入商品數(shù)據(jù)著瓶,發(fā)現(xiàn)才500條 就需要10多秒時(shí)間,太慢了啼县。后來(lái)查了一下原因材原。如下:
大量插入數(shù)據(jù) SQLITE插入一條數(shù)據(jù),事務(wù)就會(huì)被反復(fù)地開(kāi)啟季眷、關(guān)閉余蟹,會(huì)增大IO量。如果在插入數(shù)據(jù)前顯式開(kāi)啟事務(wù)子刮,插入后再一起提交威酒,則會(huì)大大提高IO效率,進(jìn)而加數(shù)據(jù)快插入速度挺峡。
根據(jù)測(cè)試結(jié)果:不預(yù)先開(kāi)啟事務(wù)葵孤,效率20 條/s。預(yù)先開(kāi)啟事務(wù)效率34095條/s橱赠。
這個(gè)效率差距挺大的尤仍。
//預(yù)先開(kāi)啟事務(wù)
db.execDML("begin;");
//提交并關(guān)閉事務(wù)
db.execDML("commit;");
加上后,幾百條商品數(shù)據(jù)1秒都不要 就插入完畢了病线,不錯(cuò)吓著。
記錄一下


        //預(yù)先開(kāi)啟事務(wù)
        db.execDML("begin;");
        //寫(xiě)入
        CppSQLite3Query q;
        for (auto&goods : goods_list)
        {
            
            sqlw = StrTool::Format(L"insert into %s VALUES(%lld,'%s','%s','%s','%s','%s','%s','%s',%d,'%s',%d,%.2f,%.2f,%d,'%s',%.2f,%.2f,%.2f,%d,%d,'%s');", table_name.c_str(), \
                goods.item_id, goods.activity_id.c_str(),goods.title.c_str(), goods.intro.c_str(), goods.item_url.c_str(), goods.pic_url.c_str(), goods.pic_url_2.c_str(), \
                goods.coupon_url.c_str(), goods.shop_type, goods.shop_name.c_str(), goods.post_free, goods.price_org, goods.price_discount, goods.sales, goods.me_code.c_str(),\
                goods.max_campaign.commission_rate, goods.coupon_start_fee, goods.coupon_fee, goods.coupon_count, goods.coupon_surplus, goods.coupon_expire.c_str());
            
            sqla = StringParse::GBToUTF8(StringParse::WStringToString(sqlw).c_str());
            db.execDML(sqla.c_str());

            //printf("insert sql:%s\n",sql);


            q.finalize();
        }

        //提交后 關(guān)閉事務(wù)
        db.execDML("commit;");

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市送挑,隨后出現(xiàn)的幾起案子绑莺,更是在濱河造成了極大的恐慌,老刑警劉巖惕耕,帶你破解...
    沈念sama閱讀 218,858評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件纺裁,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡司澎,警方通過(guò)查閱死者的電腦和手機(jī)欺缘,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,372評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)挤安,“玉大人谚殊,你說(shuō)我怎么就攤上這事「蛲” “怎么了嫩絮?”我有些...
    開(kāi)封第一講書(shū)人閱讀 165,282評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵丛肢,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我剿干,道長(zhǎng)蜂怎,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,842評(píng)論 1 295
  • 正文 為了忘掉前任置尔,我火速辦了婚禮杠步,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘榜轿。我一直安慰自己幽歼,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,857評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布差导。 她就那樣靜靜地躺著试躏,像睡著了一般猪勇。 火紅的嫁衣襯著肌膚如雪设褐。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 51,679評(píng)論 1 305
  • 那天泣刹,我揣著相機(jī)與錄音助析,去河邊找鬼。 笑死椅您,一個(gè)胖子當(dāng)著我的面吹牛外冀,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播掀泳,決...
    沈念sama閱讀 40,406評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼雪隧,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了员舵?” 一聲冷哼從身側(cè)響起脑沿,我...
    開(kāi)封第一講書(shū)人閱讀 39,311評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎马僻,沒(méi)想到半個(gè)月后庄拇,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,767評(píng)論 1 315
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡韭邓,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,945評(píng)論 3 336
  • 正文 我和宋清朗相戀三年措近,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片女淑。...
    茶點(diǎn)故事閱讀 40,090評(píng)論 1 350
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡瞭郑,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出鸭你,到底是詐尸還是另有隱情屈张,我是刑警寧澤我抠,帶...
    沈念sama閱讀 35,785評(píng)論 5 346
  • 正文 年R本政府宣布,位于F島的核電站袜茧,受9級(jí)特大地震影響菜拓,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜笛厦,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,420評(píng)論 3 331
  • 文/蒙蒙 一纳鼎、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧裳凸,春花似錦贱鄙、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,988評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至梦湘,卻和暖如春瞎颗,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背捌议。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,101評(píng)論 1 271
  • 我被黑心中介騙來(lái)泰國(guó)打工哼拔, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人瓣颅。 一個(gè)月前我還...
    沈念sama閱讀 48,298評(píng)論 3 372
  • 正文 我出身青樓倦逐,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親宫补。 傳聞我的和親對(duì)象是個(gè)殘疾皇子檬姥,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,033評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容