Hibernate的大數(shù)據(jù)量問題與性能優(yōu)化分析

科多大數(shù)據(jù)小課堂之Hibernate的大數(shù)據(jù)量問題與性能優(yōu)化分析凰狞。

不要一味的為了hibernate而hibernate還是可以考慮SQL

hibernate要做大量映射效率肯定不如純的jdbc快

這個只能說hibernate再這個方面和ibatis比還有一定差距

數(shù)據(jù)量大可以解決,現(xiàn)在我準(zhǔn)備采用分表的方式丧荐。每個月建一張表屎开,Hibernate動態(tài)生成表有什么好的解決方法嗎碉钠?

一年就是700萬條流妻,何必抱著hibernate呢

下文則是對Hibernate性能優(yōu)化技巧進(jìn)行總結(jié)性分析驹马,分析如下:

一革砸、在處理大數(shù)據(jù)量時,會有大量的數(shù)據(jù)緩沖保存在Session的一級緩存中糯累,這緩存大太時會嚴(yán)重顯示性能算利,所以在使用Hibernate處理大數(shù)據(jù)量的,可以使用session. clear()或者session. evict(Object) 在處理過程中寇蚊,清除全部的緩存或者清除某個對象笔时。

二棍好、對大數(shù)據(jù)量查詢時仗岸,慎用list()或者iterator()返回查詢結(jié)果允耿,

<1>. 使用List()返回結(jié)果時,Hibernate會所有查詢結(jié)果初始化為持久化對象扒怖,結(jié)果集較

大時较锡,會占用很多的處理時間。

<2>. 而使用iterator()返回結(jié)果時盗痒,在每次調(diào)用iterator.next()返回對象并使用對象時蚂蕴,

Hibernate才調(diào)用查詢將對應(yīng)的對象初始化,對于大數(shù)據(jù)量時俯邓,每調(diào)用一次查詢都會花

費較多的時間骡楼。當(dāng)結(jié)果集較大,但是含有較大量相同的數(shù)據(jù)稽鞭,或者結(jié)果集不是全部都會

使用時鸟整,使用iterator()才有優(yōu)勢。

<3>. 對于大數(shù)據(jù)量朦蕴,使用qry.scroll()可以得到較好的處理速度以及性能篮条。而且直接對結(jié)

果集向前向后滾動。

三吩抓、對于關(guān)聯(lián)操作涉茧,Hibernate雖然可以表達(dá)復(fù)雜的數(shù)據(jù)關(guān)系,但請慎用疹娶,使數(shù)據(jù)關(guān)系較為

簡單時會得到較好的效率伴栓,特別是較深層次的關(guān)聯(lián)時,性能會很差蚓胸。

四挣饥、對含有關(guān)聯(lián)的PO(持久化對象)時,若default-cascade="all"或者 “save-update”沛膳,新增PO時扔枫,請注意對PO中的集合的賦值操作,因為有可能使得多執(zhí)行一次update操作锹安。

五短荐、在一對多、多對一的關(guān)系中叹哭,使用延遲加載機(jī)制忍宋,會使不少的對象在使用時才會初始化,這樣可使得節(jié)省內(nèi)存空間以及減少數(shù)據(jù)庫的負(fù)荷风罩,而且若PO中的集合沒有被使用時糠排,就可減少互數(shù)據(jù)庫的交互從而減少處理時間。

六超升、對于大數(shù)據(jù)量新增入宦、修改哺徊、刪除操作或者是對大數(shù)據(jù)量的查詢,與數(shù)據(jù)庫的交互次數(shù)是決定處理時間的最重要因素乾闰,減少交互的次數(shù)是提升效率的最好途徑落追,所以在開發(fā)過程中,請將show_sql設(shè)置為true涯肩,深入了解Hibernate的處理過程轿钠,嘗試不同的方式,可以使得效率提升病苗。

七疗垛、Hibernate是以JDBC為基礎(chǔ),但是Hibernate是對JDBC的優(yōu)化硫朦,其中使用Hibernate的緩沖機(jī)制會使性能提升继谚,如使用二級緩存以及查詢緩存,若命中率較高明阵幸,性能會是到大幅提升花履。

八、Hibernate可以通過設(shè)置hibernate.jdbc.fetch_size挚赊,hibernate.jdbc.batch_size等屬性诡壁,對Hibernate進(jìn)行優(yōu)化。

九荠割、不過值得注意的是妹卿,一些數(shù)據(jù)庫提供的主鍵生成機(jī)制在效率上未必最佳,大量并發(fā)insert數(shù)據(jù)時可能會引起表之間的互鎖蔑鹦。數(shù)據(jù)庫提供的主鍵生成機(jī)制夺克,往往是通過在一個內(nèi)部表中保存當(dāng)前主鍵狀態(tài)(如對于自增型主鍵而言,此內(nèi)部表中就維護(hù)著當(dāng)前的最大值和遞增量)嚎朽,之后每次插入數(shù)據(jù)會讀取這個最大值铺纽,然后加上遞增量作為新記錄的主鍵,之后再把這個新的最大值更新回內(nèi)部表中哟忍,這樣狡门,一次Insert操作可能導(dǎo)致數(shù)據(jù)庫內(nèi)部多次表讀寫操作,同時伴隨的還有數(shù)據(jù)的加鎖解鎖操作锅很,這對性能產(chǎn)生了較大影響其馏。因此,對于并發(fā)Insert要求較高的系統(tǒng)爆安,推薦采用uuid.hex 作為主鍵生成機(jī)制叛复。

十、Dynamic Update 如果選定,則生成Update SQL 時不包含未發(fā)生變動的字段屬性褐奥,這樣可以在一定程度上提升SQL執(zhí)行效能.Dynamic Insert 如果選定肤寝,則生成Insert SQL 時不包含未發(fā)生變動的字段屬性,這樣可以在一定程度上提升SQL執(zhí)行效能

十一抖僵、在編寫代碼的時候請,對將POJO的getter/setter方法設(shè)定為public缘揪,如果設(shè)定為private耍群,Hibernate將無法對屬性的存取進(jìn)行優(yōu)化,只能轉(zhuǎn)而采用傳統(tǒng)的反射機(jī)制進(jìn)行操作找筝,這將導(dǎo)致大量的性能開銷(特別是在1.4之前的Sun JDK版本以及IBM JDK中蹈垢,反射所帶來的系統(tǒng)開銷相當(dāng)可觀)。

十二袖裕、在one-to-many 關(guān)系中曹抬,將many 一方設(shè)為主動方(inverse=false)將有助性能的改善。

十三急鳄、由于多對多關(guān)聯(lián)的性能不佳(由于引入了中間表谤民,一次讀取操作需要反復(fù)數(shù)次查詢),因此在設(shè)計中應(yīng)該避免大量使用疾宏。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末张足,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子坎藐,更是在濱河造成了極大的恐慌为牍,老刑警劉巖,帶你破解...
    沈念sama閱讀 212,454評論 6 493
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件岩馍,死亡現(xiàn)場離奇詭異碉咆,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)蛀恩,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,553評論 3 385
  • 文/潘曉璐 我一進(jìn)店門疫铜,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人双谆,你說我怎么就攤上這事块攒。” “怎么了佃乘?”我有些...
    開封第一講書人閱讀 157,921評論 0 348
  • 文/不壞的土叔 我叫張陵囱井,是天一觀的道長。 經(jīng)常有香客問我趣避,道長庞呕,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 56,648評論 1 284
  • 正文 為了忘掉前任,我火速辦了婚禮住练,結(jié)果婚禮上地啰,老公的妹妹穿的比我還像新娘。我一直安慰自己讲逛,他們只是感情好亏吝,可當(dāng)我...
    茶點故事閱讀 65,770評論 6 386
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著盏混,像睡著了一般蔚鸥。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上许赃,一...
    開封第一講書人閱讀 49,950評論 1 291
  • 那天止喷,我揣著相機(jī)與錄音,去河邊找鬼混聊。 笑死弹谁,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的句喜。 我是一名探鬼主播预愤,決...
    沈念sama閱讀 39,090評論 3 410
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼咳胃!你這毒婦竟也來了鳖粟?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,817評論 0 268
  • 序言:老撾萬榮一對情侶失蹤拙绊,失蹤者是張志新(化名)和其女友劉穎向图,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體标沪,經(jīng)...
    沈念sama閱讀 44,275評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡榄攀,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,592評論 2 327
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了金句。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片檩赢。...
    茶點故事閱讀 38,724評論 1 341
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖违寞,靈堂內(nèi)的尸體忽然破棺而出贞瞒,到底是詐尸還是另有隱情,我是刑警寧澤趁曼,帶...
    沈念sama閱讀 34,409評論 4 333
  • 正文 年R本政府宣布军浆,位于F島的核電站,受9級特大地震影響挡闰,放射性物質(zhì)發(fā)生泄漏乒融。R本人自食惡果不足惜掰盘,卻給世界環(huán)境...
    茶點故事閱讀 40,052評論 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望赞季。 院中可真熱鬧愧捕,春花似錦、人聲如沸申钩。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,815評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽撒遣。三九已至邮偎,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間愉舔,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,043評論 1 266
  • 我被黑心中介騙來泰國打工伙菜, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留轩缤,地道東北人。 一個月前我還...
    沈念sama閱讀 46,503評論 2 361
  • 正文 我出身青樓贩绕,卻偏偏與公主長得像火的,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子淑倾,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 43,627評論 2 350

推薦閱讀更多精彩內(nèi)容