將所有查詢進(jìn)行hash(query)%10缕粹,映射成新的10個(gè)文件咽块,大約每個(gè)1GB晚凿。對每個(gè)文件使用hash_map統(tǒng)計(jì)頻率并排序,然后對10個(gè)結(jié)果再歸并排序瘦馍。
有10個(gè)文件,每個(gè)文件1G侍芝,每個(gè)文件的每一行存放的都是用戶的query凶赁,每個(gè)文件的query都可能重復(fù)楼熄。要求按照query的頻度排序。
最后編輯于 :
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
- 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人因悲,你說我怎么就攤上這事堕汞。” “怎么了晃琳?”我有些...
- 文/不壞的土叔 我叫張陵讯检,是天一觀的道長琐鲁。 經(jīng)常有香客問我,道長人灼,這世上最難降的妖魔是什么绣否? 我笑而不...
- 正文 為了忘掉前任,我火速辦了婚禮挡毅,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘暴构。我一直安慰自己跪呈,他們只是感情好,可當(dāng)我...
- 文/花漫 我一把揭開白布取逾。 她就那樣靜靜地躺著耗绿,像睡著了一般。 火紅的嫁衣襯著肌膚如雪砾隅。 梳的紋絲不亂的頭發(fā)上误阻,一...
- 文/蒼蘭香墨 我猛地睜開眼琅锻,長吁一口氣:“原來是場噩夢啊……” “哼卦停!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起恼蓬,我...
- 序言:老撾萬榮一對情侶失蹤惊完,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后处硬,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體小槐,經(jīng)...
- 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
- 正文 我和宋清朗相戀三年郁油,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了本股。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
- 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響承边,放射性物質(zhì)發(fā)生泄漏遭殉。R本人自食惡果不足惜,卻給世界環(huán)境...
- 文/蒙蒙 一博助、第九天 我趴在偏房一處隱蔽的房頂上張望险污。 院中可真熱鬧,春花似錦富岳、人聲如沸蛔糯。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽蚁飒。三九已至,卻和暖如春萝喘,著一層夾襖步出監(jiān)牢的瞬間淮逻,已是汗流浹背。 一陣腳步聲響...
- 正文 我出身青樓强窖,卻偏偏與公主長得像凸椿,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個(gè)殘疾皇子翅溺,可洞房花燭夜當(dāng)晚...
推薦閱讀更多精彩內(nèi)容
- 教你如何迅速秒殺掉:99%的海量數(shù)據(jù)處理面試題 本文經(jīng)過大量細(xì)致的優(yōu)化后脑漫,收錄于我的新書《編程之法》第六章中,新書...
- 給定a咙崎、b兩個(gè)文件优幸,各存放50億個(gè)url,每個(gè)url各占64字節(jié)褪猛,內(nèi)存限制是4G网杆,讓你找出a、b文件共同的url伊滋?...
- 摘要:本文將向您講述諸多數(shù)據(jù)處理面試題以及方法的總結(jié)碳却。 第一部分、十道海量數(shù)據(jù)處理面試題 1笑旺、海量日志數(shù)據(jù)昼浦,提取出...
- 第一部分、十道海量數(shù)據(jù)處理面試題 1筒主、海量日志數(shù)據(jù)关噪,提取出某日訪問百度次數(shù)最多的那個(gè)IP鸟蟹。 此題,在我之前的一篇文...
- 轉(zhuǎn)自http://blog.csdn.net/v_july_v/article/details/7382693 題...