1.問題1：海量日志數(shù)據(jù)，提取出某日訪問百度次數(shù)最多的那個IP。
2.問題2：尋找熱門查詢，300萬個查詢字符串中統(tǒng)計最熱門的10個查詢见转。
3.問題3：有一個1G大小的一個文件，里面每一行是一個詞蒜哀，詞的大小不超過16字節(jié)斩箫，內(nèi)存限制大小是1M。返回頻數(shù)最高的100個詞撵儿。
4.問題4：海量數(shù)據(jù)分布在100臺電腦中乘客，想個辦法高效統(tǒng)計出這批數(shù)據(jù)的TOP10。
5.問題5：有10個文件淀歇，每個文件1G易核，每個文件的每一行存放的都是用戶的query，每個文件的query都可能重復(fù)浪默。要求你按照query的頻度排##序牡直。
6.問題6：給定a、b兩個文件纳决，各存放50億個url碰逸，每個url各占64字節(jié)，內(nèi)存限制是4G阔加，讓你找出a花竞、b文件共同的url？ ##問題7：在2.5億個整數(shù)中找出不重復(fù)的整數(shù)，注约急，內(nèi)存不足以容納這2.5億個整數(shù)零远。 ##問題8： 100w個數(shù)中找出最大的100個數(shù)。
大數(shù)據(jù)相關(guān)問題
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
- 文/潘曉璐 我一進店門投剥，熙熙樓的掌柜王于貴愁眉苦臉地迎上來师脂，“玉大人，你說我怎么就攤上這事江锨〕跃” “怎么了？”我有些...
- 文/不壞的土叔 我叫張陵啄育，是天一觀的道長酌心。 經(jīng)常有香客問我，道長挑豌，這世上最難降的妖魔是什么安券？ 我笑而不...
- 正文 為了忘掉前任，我火速辦了婚禮氓英，結(jié)果婚禮上侯勉，老公的妹妹穿的比我還像新娘。我一直安慰自己债蓝，他們只是感情好壳鹤，可當我...
- 文/花漫 我一把揭開白布盛龄。 她就那樣靜靜地躺著饰迹，像睡著了一般。 火紅的嫁衣襯著肌膚如雪余舶。 梳的紋絲不亂的頭發(fā)上啊鸭，一...
- 文/蒼蘭香墨 我猛地睜開眼，長吁一口氣：“原來是場噩夢啊……” “哼政恍！你這毒婦竟也來了汪拥？” 一聲冷哼從身側(cè)響起，我...
- 正文 年R本政府宣布懈糯，位于F島的核電站，受9級特大地震影響单雾，放射性物質(zhì)發(fā)生泄漏赚哗。R本人自食惡果不足惜，卻給世界環(huán)境...
- 文/蒙蒙 一硅堆、第九天 我趴在偏房一處隱蔽的房頂上張望屿储。 院中可真熱鬧，春花似錦渐逃、人聲如沸够掠。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽疯潭。三九已至，卻和暖如春面殖，著一層夾襖步出監(jiān)牢的瞬間竖哩，已是汗流浹背。 一陣腳步聲響...
推薦閱讀更多精彩內(nèi)容
- 一.簡述如何安裝配置apache 的一個開源的hadoop 1.使用root賬戶登陸 2.修改ip 3.修改hos...
- 摘要：本文將向您講述諸多數(shù)據(jù)處理面試題以及方法的總結(jié)。 第一部分端辱、十道海量數(shù)據(jù)處理面試題 1梁剔、海量日志數(shù)據(jù)，提取出...
- 轉(zhuǎn)自: 結(jié)構(gòu)之法算法之道blog 前言 一般而言舞蔽，標題含有“秒殺”荣病，“99%”，“史上最全/最強”等詞匯的往往都...
- 第一部分：十道海量數(shù)據(jù)處理面試題 1渗柿、海量日志數(shù)據(jù)个盆，提取出某日訪問百度次數(shù)最多的那個IP。 IP的數(shù)目還是有限的朵栖，...
- 教你如何迅速秒殺掉：99%的海量數(shù)據(jù)處理面試題 本文經(jīng)過大量細致的優(yōu)化后颊亮，收錄于我的新書《編程之法》第六章中，新書...
