無監(jiān)督學習

K均值算法的優(yōu)缺點是什么抓于?如何對其進行調(diào)優(yōu)?

K均值算法有一些缺點浇借,例如受初值和離群點的影響捉撮,每次的結(jié)果不穩(wěn)定,結(jié)果通常不是全局最優(yōu)而是局部最優(yōu)解妇垢,無法很好的解決數(shù)據(jù)簇分布差別比較大的情況(比如一類是另一類樣本數(shù)量的100倍)巾遭,不太適用于離散分裂等肉康。

但是K均值聚類算法的優(yōu)點主要體現(xiàn)在:對于大數(shù)據(jù)集。K均值聚類算法相對是可伸縮和高效的灼舍,他的計算復雜度是O(NKt)接近與線性吼和,其中N是數(shù)據(jù)對象的數(shù)目,K是聚類的簇數(shù)骑素,t是迭代的輪數(shù)炫乓。盡管算法經(jīng)常以局部最優(yōu)結(jié)束,但一般情況下達到局部最優(yōu)已經(jīng)可以滿足聚類的需求献丑。

希望找到最好的參數(shù)θ末捣,能夠使最大似然目標函數(shù)取最大值。

目標是使損失函數(shù)最小创橄,在E-step時箩做,找到一個最逼近目標的函數(shù)γ;在M-step時筐摘,固定函數(shù)γ卒茬,更新均值μ(找到當前函數(shù)下的最好的值)。所以一定會收斂了.

聚類評估(輪廓系數(shù)Silhouette Coefficient)

這個指標計算的是樣本i到同簇其他樣本的平均距離 , 越小咖熟,說明樣本i越應該被聚類到該簇圃酵。將 稱為樣本i的簇

內(nèi)不相似度。

計算樣本i到其他某簇的所有樣本的平均距離馍管,稱為樣本i與簇 的不相似度郭赐。

接近1,則說明樣本i聚類合理

接近-1确沸,則說明樣本i更應該分類到另外的簇

若 近似為0捌锭,則說明樣本i在兩個簇的邊界上。

我們對標準化前后的數(shù)據(jù)進行輪廓系數(shù)計算:


做標準化的結(jié)果比較低罗捎,不做標準化的結(jié)果比較高观谦。這是因為特征的重要性我們是不知道的,我們將calories的重要度通過標準化降低之后可能會造成不好的影響桨菜。

豁状,我們就有了kmeans的一個標準流程:我們先進行聚類,然后可視化展示倒得,之后再評估泻红,想一想什么參數(shù)

比較合適,再重新聚類

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末霞掺,一起剝皮案震驚了整個濱河市谊路,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌菩彬,老刑警劉巖缠劝,帶你破解...
    沈念sama閱讀 222,183評論 6 516
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件潮梯,死亡現(xiàn)場離奇詭異,居然都是意外死亡剩彬,警方通過查閱死者的電腦和手機酷麦,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,850評論 3 399
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來喉恋,“玉大人沃饶,你說我怎么就攤上這事∏岷冢” “怎么了糊肤?”我有些...
    開封第一講書人閱讀 168,766評論 0 361
  • 文/不壞的土叔 我叫張陵,是天一觀的道長氓鄙。 經(jīng)常有香客問我馆揉,道長,這世上最難降的妖魔是什么抖拦? 我笑而不...
    開封第一講書人閱讀 59,854評論 1 299
  • 正文 為了忘掉前任升酣,我火速辦了婚禮,結(jié)果婚禮上态罪,老公的妹妹穿的比我還像新娘噩茄。我一直安慰自己,他們只是感情好复颈,可當我...
    茶點故事閱讀 68,871評論 6 398
  • 文/花漫 我一把揭開白布绩聘。 她就那樣靜靜地躺著,像睡著了一般耗啦。 火紅的嫁衣襯著肌膚如雪凿菩。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,457評論 1 311
  • 那天帜讲,我揣著相機與錄音衅谷,去河邊找鬼。 笑死似将,一個胖子當著我的面吹牛获黔,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播玩郊,決...
    沈念sama閱讀 40,999評論 3 422
  • 文/蒼蘭香墨 我猛地睜開眼肢执,長吁一口氣:“原來是場噩夢啊……” “哼枉阵!你這毒婦竟也來了译红?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,914評論 0 277
  • 序言:老撾萬榮一對情侶失蹤兴溜,失蹤者是張志新(化名)和其女友劉穎侦厚,沒想到半個月后耻陕,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,465評論 1 319
  • 正文 獨居荒郊野嶺守林人離奇死亡刨沦,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,543評論 3 342
  • 正文 我和宋清朗相戀三年诗宣,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片想诅。...
    茶點故事閱讀 40,675評論 1 353
  • 序言:一個原本活蹦亂跳的男人離奇死亡召庞,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出来破,到底是詐尸還是另有隱情篮灼,我是刑警寧澤,帶...
    沈念sama閱讀 36,354評論 5 351
  • 正文 年R本政府宣布徘禁,位于F島的核電站诅诱,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏送朱。R本人自食惡果不足惜娘荡,卻給世界環(huán)境...
    茶點故事閱讀 42,029評論 3 335
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望驶沼。 院中可真熱鬧炮沐,春花似錦、人聲如沸商乎。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,514評論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽鹉戚。三九已至鲜戒,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間抹凳,已是汗流浹背遏餐。 一陣腳步聲響...
    開封第一講書人閱讀 33,616評論 1 274
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留赢底,地道東北人失都。 一個月前我還...
    沈念sama閱讀 49,091評論 3 378
  • 正文 我出身青樓,卻偏偏與公主長得像幸冻,于是被迫代替她去往敵國和親粹庞。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 45,685評論 2 360

推薦閱讀更多精彩內(nèi)容