[kaggle]DC比賽進(jìn)程5

  • 本周開(kāi)始試了下高德的路徑規(guī)劃導(dǎo)航面哥,雖然效果很差哎壳,但其中有一些借鑒意義,可以作為備選的特征放到后期的model中尚卫。例如归榕,路徑的導(dǎo)航距離、預(yù)估時(shí)間等吱涉;
  • 后面在研究geohash做相同軌跡識(shí)別的工作刹泄,有一些資料了,明天有空整理一下共享怎爵,還有機(jī)器學(xué)習(xí)平臺(tái)的選擇特石,H2O(已搭建好)/Caffe/TensorFlow,在這里需要補(bǔ)充下接下來(lái)整體的model過(guò)程:

數(shù)據(jù)清洗:載客狀態(tài)的真實(shí)性鳖链、GPS的連續(xù)性(因?yàn)楝F(xiàn)在預(yù)估不出這兩問(wèn)題造成的影響县匠,可以先跳過(guò),先做第二步)
數(shù)據(jù)抽热雎帧:選取和預(yù)測(cè)目標(biāo)軌跡相同的行程(Q:相似軌跡識(shí)別算法乞旦?單用戶(hù)篩選or全體篩選?這里本來(lái)一開(kāi)始是打算直接學(xué)習(xí)全量數(shù)據(jù)题山,得到任意兩點(diǎn)的時(shí)間預(yù)測(cè)模型(不可行兰粉,kill))
特征工程:特征選擇(各種論文都試試)
訓(xùn)練模型:基于機(jī)器學(xué)習(xí)平臺(tái)做算法的選擇(這部分都是套路,除非去做深度神經(jīng)網(wǎng)絡(luò))
模型迭代:不斷重復(fù)上兩步顶瞳,直到以?xún)?yōu)異的成績(jī)進(jìn)入復(fù)賽O.O

  • 之前給大家的四個(gè)資源中玖姑,PKDD的第二個(gè)比賽是最接近的,除了張洋和我上傳的兩篇文章外:可以到比賽的論壇找些靈感來(lái)源:
    https://www.kaggle.com/c/pkdd-15-taxi-trip-time-prediction-ii/forums/t/14988/method-sharing
    通過(guò)昨天的地毯式搜索慨菱,找到了一些開(kāi)源的代碼焰络。需要有人研讀一下,總結(jié)下其中的算法符喝,特別是軌跡識(shí)別闪彼,和復(fù)用價(jià)值:

R:Kaggle_Taxi_Trajectory
py:kaggle-taxi-ii
R:kaggle-taxi-II-1
突然想了下,為什么不去直接找kaggle,taxi:

不要搶?zhuān)蠹叶加蟹輧?/div>

我來(lái)承擔(dān)8個(gè)R的項(xiàng)目的研讀畏腕,注意只要時(shí)間預(yù)測(cè)缴川,不要看目的地預(yù)測(cè)的項(xiàng)目。(待會(huì)分一下描馅,還有兩個(gè)notebook的把夸,完美)。注意:只看算法铭污,如果作者有文檔說(shuō)明恋日,就勁量不要去研究沒(méi)有注釋的代碼(別問(wèn)我為什么)。

行程選擇部分應(yīng)該是這個(gè)模型里最重要的問(wèn)題了嘹狞,選取什么樣的數(shù)據(jù)來(lái)做預(yù)測(cè)谚鄙?
關(guān)于行程選擇部分的兩個(gè)憂慮:

  1. 算法復(fù)雜度太高,如果全體搜索時(shí)間長(zhǎng)刁绒,效率低闷营?
  2. 選擇后的數(shù)據(jù)樣本不太大。不足以支持機(jī)器學(xué)習(xí)知市,過(guò)擬合現(xiàn)象嚴(yán)重傻盟。效果差?
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末嫂丙,一起剝皮案震驚了整個(gè)濱河市娘赴,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌跟啤,老刑警劉巖诽表,帶你破解...
    沈念sama閱讀 206,839評(píng)論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異隅肥,居然都是意外死亡竿奏,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,543評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門(mén)腥放,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)泛啸,“玉大人,你說(shuō)我怎么就攤上這事秃症『蛑罚” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 153,116評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵种柑,是天一觀的道長(zhǎng)岗仑。 經(jīng)常有香客問(wèn)我,道長(zhǎng)聚请,這世上最難降的妖魔是什么荠雕? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 55,371評(píng)論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上舞虱,老公的妹妹穿的比我還像新娘欢际。我一直安慰自己母市,他們只是感情好矾兜,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,384評(píng)論 5 374
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著患久,像睡著了一般椅寺。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上蒋失,一...
    開(kāi)封第一講書(shū)人閱讀 49,111評(píng)論 1 285
  • 那天返帕,我揣著相機(jī)與錄音,去河邊找鬼篙挽。 笑死荆萤,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的铣卡。 我是一名探鬼主播链韭,決...
    沈念sama閱讀 38,416評(píng)論 3 400
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼煮落!你這毒婦竟也來(lái)了敞峭?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 37,053評(píng)論 0 259
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤蝉仇,失蹤者是張志新(化名)和其女友劉穎旋讹,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體轿衔,經(jīng)...
    沈念sama閱讀 43,558評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡沉迹,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,007評(píng)論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了害驹。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片胚股。...
    茶點(diǎn)故事閱讀 38,117評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖裙秋,靈堂內(nèi)的尸體忽然破棺而出琅拌,到底是詐尸還是另有隱情,我是刑警寧澤摘刑,帶...
    沈念sama閱讀 33,756評(píng)論 4 324
  • 正文 年R本政府宣布进宝,位于F島的核電站,受9級(jí)特大地震影響枷恕,放射性物質(zhì)發(fā)生泄漏党晋。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,324評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望未玻。 院中可真熱鬧灾而,春花似錦、人聲如沸扳剿。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,315評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)庇绽。三九已至锡搜,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間瞧掺,已是汗流浹背耕餐。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,539評(píng)論 1 262
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留辟狈,地道東北人肠缔。 一個(gè)月前我還...
    沈念sama閱讀 45,578評(píng)論 2 355
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像哼转,于是被迫代替她去往敵國(guó)和親明未。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,877評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容