對數(shù)據(jù)集進行拉普拉斯平滑處理

來自:?https://blog.csdn.net/bbbeoy/article/details/71249316?

背景:為什么要做平滑處理?

  零概率問題位迂,就是在計算實例的概率時,如果某個量x予颤,在觀察樣本庫(訓(xùn)練集)中沒有出現(xiàn)過囤官,會導(dǎo)致整個實例的概率結(jié)果是0。在文本分類的問題中蛤虐,當一個詞語沒有在訓(xùn)練樣本中出現(xiàn)党饮,該詞語調(diào)概率為0,使用連乘計算文本出現(xiàn)概率時也為0驳庭。這是不合理的刑顺,不能因為一個事件沒有觀察到就武斷的認為該事件的概率是0。

拉普拉斯的理論支撐

為了解決零概率的問題饲常,法國數(shù)學(xué)家拉普拉斯最早提出用加1的方法估計沒有出現(xiàn)過的現(xiàn)象的概率蹲堂,所以加法平滑也叫做拉普拉斯平滑。

假定訓(xùn)練樣本很大時贝淤,每個分量x的計數(shù)加1造成的估計概率變化可以忽略不計柒竞,但可以方便有效的避免零概率問題。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末播聪,一起剝皮案震驚了整個濱河市朽基,隨后出現(xiàn)的幾起案子布隔,更是在濱河造成了極大的恐慌,老刑警劉巖稼虎,帶你破解...
    沈念sama閱讀 218,284評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件衅檀,死亡現(xiàn)場離奇詭異,居然都是意外死亡霎俩,警方通過查閱死者的電腦和手機哀军,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,115評論 3 395
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來打却,“玉大人杉适,你說我怎么就攤上這事×鳎” “怎么了淘衙?”我有些...
    開封第一講書人閱讀 164,614評論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長腻暮。 經(jīng)常有香客問我,道長毯侦,這世上最難降的妖魔是什么哭靖? 我笑而不...
    開封第一講書人閱讀 58,671評論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮侈离,結(jié)果婚禮上试幽,老公的妹妹穿的比我還像新娘。我一直安慰自己卦碾,他們只是感情好铺坞,可當我...
    茶點故事閱讀 67,699評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著洲胖,像睡著了一般济榨。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上绿映,一...
    開封第一講書人閱讀 51,562評論 1 305
  • 那天擒滑,我揣著相機與錄音,去河邊找鬼叉弦。 笑死丐一,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的淹冰。 我是一名探鬼主播库车,決...
    沈念sama閱讀 40,309評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼樱拴!你這毒婦竟也來了柠衍?” 一聲冷哼從身側(cè)響起洋满,我...
    開封第一講書人閱讀 39,223評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎拧略,沒想到半個月后芦岂,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,668評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡垫蛆,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,859評論 3 336
  • 正文 我和宋清朗相戀三年禽最,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片袱饭。...
    茶點故事閱讀 39,981評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡川无,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出虑乖,到底是詐尸還是另有隱情懦趋,我是刑警寧澤,帶...
    沈念sama閱讀 35,705評論 5 347
  • 正文 年R本政府宣布疹味,位于F島的核電站仅叫,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏糙捺。R本人自食惡果不足惜诫咱,卻給世界環(huán)境...
    茶點故事閱讀 41,310評論 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望洪灯。 院中可真熱鬧坎缭,春花似錦、人聲如沸签钩。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,904評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽铅檩。三九已至憎夷,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間昧旨,已是汗流浹背岭接。 一陣腳步聲響...
    開封第一講書人閱讀 33,023評論 1 270
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留臼予,地道東北人鸣戴。 一個月前我還...
    沈念sama閱讀 48,146評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像粘拾,于是被迫代替她去往敵國和親窄锅。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 44,933評論 2 355