自己理解的各大數(shù)據(jù)庫應用場景,不一定對

Mapreduice:
理解:
大數(shù)據(jù)并行處理的計算模型。
用途:
為保證數(shù)據(jù)處理速度败徊,大數(shù)據(jù)處理部分用這個模型去做。

Elasticsearch:
理解:
Elasticsearch是提供持久存儲掏缎、統(tǒng)計等多項功能的現(xiàn)代搜索引擎皱蹦。
用途:
可以用它來存儲已經(jīng)算好,或者不需要去更新的數(shù)據(jù)眷蜈,主要用它做數(shù)據(jù)查詢沪哺。

Hive:
理解:
構建在基于靜態(tài)批處理的Hadoop之上,基于MapReduce任務實現(xiàn)大數(shù)據(jù)集的批處理作業(yè)酌儒。
用途:
大數(shù)據(jù)處理基于這個數(shù)據(jù)庫去做大量結(jié)構化數(shù)據(jù)的離線分析辜妓、多維度離線數(shù)據(jù)分析,存儲離線的日志信息供后續(xù)定位忌怎、分析使用籍滴。

MongoDB:
理解:
基于分布式文件存儲的非關系數(shù)據(jù)庫。
用途:
可以用它來做web網(wǎng)站實時結(jié)構化數(shù)據(jù)緩存榴啸。

Redis:
理解:
高性能的key-value數(shù)據(jù)庫孽惰。
用途:
可以用它來做web網(wǎng)站非結(jié)構化數(shù)據(jù)的緩存。也可以用于高性能的任務隊列鸥印。

Mysql:
理解:
web服務最好用的RDBMS
用途:
用它來存儲量級不是很大的網(wǎng)站數(shù)據(jù)勋功,例如用戶數(shù)據(jù),會員等級數(shù)據(jù)库说,用戶的登錄酝润、操作日志數(shù)據(jù)。

Kafka:
理解:
一種高吞吐量的分布式發(fā)布訂閱消息系統(tǒng)璃弄,每秒可以處理幾十萬條消息,延遲低构回,支持數(shù)千個客戶端同時讀寫夏块,支持熱擴展
用途:
1. 服務日志收集
2. 用作消息隊列,例如爬蟲抓取完的數(shù)據(jù)存到kafka纤掸,數(shù)據(jù)處理從kafka獲取數(shù)據(jù)進行后續(xù)處理脐供。
3. 榜單數(shù)據(jù)收集,每次打開榜單頁借跪,可直接從kafka從頭到尾按順序讀出榜單數(shù)據(jù)
4. 用戶活動跟蹤政己,記錄用戶活動行為
5. 運營監(jiān)控數(shù)據(jù)的存儲
6. 流式處理的數(shù)據(jù)存儲

memcache:
理解:
基于多線程的key-value數(shù)據(jù)庫。
用途:
暫時用不到掏愁,redis就夠了歇由。

Hbase:
理解:
可以理解為能存更多數(shù)據(jù)卵牍,擴展更容易,大數(shù)據(jù)量頻繁操作成本更低的redis
用途:
暫時用不到沦泌,數(shù)據(jù)量級沒那么大糊昙。

Spark:
理解:
Spark是大規(guī)模數(shù)據(jù)處理的通用框架
用途:
可以和kafka配合使用,做流式處理和機器學習谢谦。

?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末释牺,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子回挽,更是在濱河造成了極大的恐慌没咙,老刑警劉巖,帶你破解...
    沈念sama閱讀 218,546評論 6 507
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件千劈,死亡現(xiàn)場離奇詭異祭刚,居然都是意外死亡,警方通過查閱死者的電腦和手機队塘,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,224評論 3 395
  • 文/潘曉璐 我一進店門袁梗,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人憔古,你說我怎么就攤上這事遮怜。” “怎么了鸿市?”我有些...
    開封第一講書人閱讀 164,911評論 0 354
  • 文/不壞的土叔 我叫張陵锯梁,是天一觀的道長。 經(jīng)常有香客問我焰情,道長陌凳,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,737評論 1 294
  • 正文 為了忘掉前任内舟,我火速辦了婚禮合敦,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘验游。我一直安慰自己充岛,他們只是感情好,可當我...
    茶點故事閱讀 67,753評論 6 392
  • 文/花漫 我一把揭開白布耕蝉。 她就那樣靜靜地躺著崔梗,像睡著了一般。 火紅的嫁衣襯著肌膚如雪垒在。 梳的紋絲不亂的頭發(fā)上蒜魄,一...
    開封第一講書人閱讀 51,598評論 1 305
  • 那天,我揣著相機與錄音,去河邊找鬼谈为。 笑死旅挤,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的峦阁。 我是一名探鬼主播谦铃,決...
    沈念sama閱讀 40,338評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼榔昔!你這毒婦竟也來了驹闰?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,249評論 0 276
  • 序言:老撾萬榮一對情侶失蹤撒会,失蹤者是張志新(化名)和其女友劉穎嘹朗,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體诵肛,經(jīng)...
    沈念sama閱讀 45,696評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡屹培,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,888評論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了怔檩。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片褪秀。...
    茶點故事閱讀 40,013評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖薛训,靈堂內(nèi)的尸體忽然破棺而出媒吗,到底是詐尸還是另有隱情,我是刑警寧澤乙埃,帶...
    沈念sama閱讀 35,731評論 5 346
  • 正文 年R本政府宣布闸英,位于F島的核電站,受9級特大地震影響介袜,放射性物質(zhì)發(fā)生泄漏甫何。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,348評論 3 330
  • 文/蒙蒙 一遇伞、第九天 我趴在偏房一處隱蔽的房頂上張望辙喂。 院中可真熱鬧,春花似錦鸠珠、人聲如沸加派。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,929評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至竹勉,卻和暖如春飞盆,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,048評論 1 270
  • 我被黑心中介騙來泰國打工吓歇, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留孽水,地道東北人。 一個月前我還...
    沈念sama閱讀 48,203評論 3 370
  • 正文 我出身青樓城看,卻偏偏與公主長得像女气,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子测柠,可洞房花燭夜當晚...
    茶點故事閱讀 44,960評論 2 355