IP屬地：北京
-
推薦系統(tǒng)正負(fù)樣本構(gòu)造
推薦系統(tǒng)正負(fù)樣本構(gòu)造 在feed場景中，使用曝光（展示）日志時黄绩，應(yīng)該選擇APP的SDK埋點(diǎn)的日志羡洁，而不是服務(wù)器Web接口返回的日志，因?yàn)閃eb接...
-
模型調(diào)優(yōu)-過擬合篇
過擬合 在訓(xùn)練數(shù)據(jù)不夠多時爽丹，或者overtraining時筑煮，常常會導(dǎo)致overfitting（過擬合）。其直觀的表現(xiàn)如下圖所示粤蝎，隨著訓(xùn)練過程的進(jìn)...
-
局部敏感哈希LSHLSH局部敏感哈希 問題場景： 快速的從海量高維數(shù)據(jù)集合中找到與某個數(shù)據(jù)最相似（距離最近）的一個數(shù)據(jù)或多個數(shù)據(jù) 局部敏感： 指樣本越相似真仲，經(jīng)過哈...
-
推薦系統(tǒng)-隱語義模型我們描述一個人的喜好一般是在一個低維空間來說的，比如：小明喜歡看武俠小說初澎，聽搖滾等等秸应。而不需要一一去列出具體的小說名字或者是歌曲名字。隱語義模型...
-
ALS交替最小二乘算法
ALS交替最小二乘算法 ??ALS指使用交替最小二乘法求解的協(xié)同過濾算法。通過觀察到的所有用戶給產(chǎn)品打分灸眼，來推斷每個用戶的喜好并向用戶推薦合適的...
-
偏差與方差
原文鏈接 機(jī)器學(xué)習(xí)面試之偏差方差 在機(jī)器學(xué)習(xí)的面試中卧檐，能不能講清楚偏差方差，經(jīng)常被用來考察面試者的理論基礎(chǔ)焰宣。偏差方差看似很簡單霉囚，但真要徹底地說明...
-
spark調(diào)優(yōu)篇(充分利用集群資源)
資源利用角度 - 基本概念： 這里先簡單介紹一下partition與core的概念。core為最小的計(jì)算單元匕积，partition為最小的文件對象...
-
spark dataframe操作大全
取某一列的分位數(shù) 取出a_df中有盈罐，b_df中沒有的行 spark json array string spark sql在讀取hive表數(shù)據(jù)結(jié)...
-
頻繁項(xiàng)集挖掘（單機(jī)版本 + 分布式版本）
頻繁項(xiàng)集挖掘的基本概念請直接看我參考的文章，我這里只給出頻繁項(xiàng)集單機(jī)版和分布式版本的實(shí)現(xiàn)闪唆。通過單機(jī)版本熟悉算法的基本思想盅粪，分布式版本則是用于工業(yè)...