2016 KDD CUP 大數(shù)據(jù)競賽總結(jié)

在2016.03 - 2016.06實驗室相互組隊參加了2016 KDD CUP 大數(shù)據(jù)競賽扑毡,總共組了三支隊伍探遵。我所在這支隊伍取得了35/341的成績柳沙。

項目描述 :

基于相關(guān)機構(gòu)在 8 個會議前 5 年的論文被接收數(shù)據(jù)岩灭,預(yù)測相關(guān)研究機構(gòu) 2016 年論文的被接收數(shù)量,進而計算出 2016 年指定會議

的相關(guān)機構(gòu)影響力排名赂鲤。

主要工作 :

1噪径、特征選擇

2、特征抽取

3数初、分別使用了線性回歸模型與 LR 模型對機構(gòu)論文接收數(shù)量進行預(yù)測找爱,計算研究機構(gòu)的影響力

成績:

F 值 35/341

工作:

根據(jù)5年的歷史數(shù)據(jù),預(yù)測2016年指定會議的機構(gòu)排名泡孩。最后共我們確定了兩個特征车摄,

x1. 機構(gòu)每年每個會議論文的被接收數(shù)量茎杂。

x2. 2011-2015每個機構(gòu)在各個會議上的排名没宾,簡稱機構(gòu)排名诺凡。(我們假設(shè)每年的機構(gòu)排名都對下一年的排名產(chǎn)生影響)

Y值:機構(gòu)的相關(guān)性得分(概率得分0-1)病瞳,即機構(gòu)的影響力的分。這個有公式可以計算出來薄料!

補充(特征x2和Y值的區(qū)別):這里注意機構(gòu)的排名和相關(guān)性得分是不同的敞贡。比如,在2015年斯坦福大學(xué)的在KDD投遞了50篇文章摄职,排名第一誊役,但是這50篇文章的里面有許多第二第三作者的文章,按照給出的規(guī)則谷市,每個機構(gòu)只能給蛔垢。那么1/3分的分。那么官方也給出了一個公式通過排名計算機構(gòu)的相關(guān)性得分---即機構(gòu)的影響力得分迫悠,也就是Y值的實質(zhì)鹏漆。 ?所以,就是斯坦福排名第一创泄,但是艺玲,它的影響力卻不一定能夠排名第一!


我們就拿2011-2014年的數(shù)據(jù)作為訓(xùn)練集鞠抑,訓(xùn)練出來參數(shù)后饭聚,拿2015年的數(shù)據(jù)作為測試集,得出2016年的機構(gòu)機構(gòu)得分并排名搁拙。

然后秒梳,提出每一個會議的前20名作為最終的提交結(jié)果。

特征x1機構(gòu)每年每個會議論文的被接收數(shù)量paper_num:

特征x2為2011-2015每個機構(gòu)在各個會議上的排名:


相關(guān)性得分Y:根據(jù)比賽官網(wǎng)給的公式得到:


? ? ? ? ? ? ?我們據(jù)此提取出Y值:

特征及標(biāo)簽我們都構(gòu)造完了箕速,就可以利用算法進行了酪碘!當(dāng)然了,特征的提取及標(biāo)簽Y都需要我們選擇并進行提取計算盐茎。

給出一篇師姐總結(jié)的文章兴垦,總結(jié)的挺好,具體細節(jié)我就略了

https://www.douban.com/note/579609055/

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末字柠,一起剝皮案震驚了整個濱河市滑进,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌募谎,老刑警劉巖,帶你破解...
    沈念sama閱讀 206,482評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件阴汇,死亡現(xiàn)場離奇詭異数冬,居然都是意外死亡,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,377評論 2 382
  • 文/潘曉璐 我一進店門拐纱,熙熙樓的掌柜王于貴愁眉苦臉地迎上來铜异,“玉大人,你說我怎么就攤上這事秸架∽嶙” “怎么了?”我有些...
    開封第一講書人閱讀 152,762評論 0 342
  • 文/不壞的土叔 我叫張陵东抹,是天一觀的道長蚂子。 經(jīng)常有香客問我,道長缭黔,這世上最難降的妖魔是什么食茎? 我笑而不...
    開封第一講書人閱讀 55,273評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮馏谨,結(jié)果婚禮上别渔,老公的妹妹穿的比我還像新娘。我一直安慰自己惧互,他們只是感情好哎媚,可當(dāng)我...
    茶點故事閱讀 64,289評論 5 373
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著喊儡,像睡著了一般拨与。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上管宵,一...
    開封第一講書人閱讀 49,046評論 1 285
  • 那天截珍,我揣著相機與錄音,去河邊找鬼箩朴。 笑死岗喉,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的炸庞。 我是一名探鬼主播钱床,決...
    沈念sama閱讀 38,351評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼埠居!你這毒婦竟也來了查牌?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 36,988評論 0 259
  • 序言:老撾萬榮一對情侶失蹤滥壕,失蹤者是張志新(化名)和其女友劉穎纸颜,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體绎橘,經(jīng)...
    沈念sama閱讀 43,476評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡胁孙,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,948評論 2 324
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片涮较。...
    茶點故事閱讀 38,064評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡稠鼻,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出狂票,到底是詐尸還是另有隱情候齿,我是刑警寧澤,帶...
    沈念sama閱讀 33,712評論 4 323
  • 正文 年R本政府宣布闺属,位于F島的核電站慌盯,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏屋剑。R本人自食惡果不足惜润匙,卻給世界環(huán)境...
    茶點故事閱讀 39,261評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望唉匾。 院中可真熱鬧孕讳,春花似錦、人聲如沸巍膘。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,264評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽峡懈。三九已至璃饱,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間肪康,已是汗流浹背荚恶。 一陣腳步聲響...
    開封第一講書人閱讀 31,486評論 1 262
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留磷支,地道東北人谒撼。 一個月前我還...
    沈念sama閱讀 45,511評論 2 354
  • 正文 我出身青樓,卻偏偏與公主長得像雾狈,于是被迫代替她去往敵國和親廓潜。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,802評論 2 345

推薦閱讀更多精彩內(nèi)容