大數(shù)據(jù)的概念和基本技術(shù)的通俗的解釋

有人說(shuō)大數(shù)據(jù)技術(shù)是第四次技術(shù)革命,這個(gè)說(shuō)法其實(shí)不為過(guò)惠毁。很多人只是聽(tīng)過(guò)大數(shù)據(jù)這個(gè)詞或者是簡(jiǎn)單知道它是什么犹芹,那么它是什么呢,在這里就通俗點(diǎn)來(lái)說(shuō)一下個(gè)人對(duì)大數(shù)據(jù)的理解鞠绰。

大數(shù)據(jù)腰埂,很明顯從字面上理解就是大量的數(shù)據(jù),海量的數(shù)據(jù)蜈膨。大屿笼,意思就是數(shù)據(jù)的量級(jí)很大,不上TB都不好意思說(shuō)是大數(shù)據(jù)翁巍。數(shù)據(jù)刁卜,狹義上理解就是12345那么些數(shù)據(jù),畢竟計(jì)算機(jī)底層是二進(jìn)制來(lái)存的曙咽,那么在大數(shù)據(jù)領(lǐng)域蛔趴,數(shù)據(jù)就不僅僅包括數(shù)字這些,它可以是所有格式的東西例朱,比如日志孝情,音頻視頻,文件等等洒嗤。

所以箫荡,大數(shù)據(jù)從字面上理解就是海量的數(shù)據(jù),技術(shù)上它包括這些海量數(shù)據(jù)的采集渔隶,過(guò)濾羔挡,清洗,存儲(chǔ)间唉,處理绞灼,查看等等部分,每一個(gè)部分包括一些大數(shù)據(jù)的相關(guān)技術(shù)框架來(lái)支持呈野。

舉個(gè)例子低矮,淘寶雙十一的總交易額的顯示,后面就是大數(shù)據(jù)技術(shù)的支持被冒,全國(guó)那么多淘寶用戶的交易記錄匯聚到一起军掂,數(shù)據(jù)量很大轮蜕,而且要做到實(shí)時(shí)的展現(xiàn),就需要強(qiáng)有力的大數(shù)據(jù)技術(shù)來(lái)處理了蝗锥。

數(shù)據(jù)量一大跃洛,那么得找地方來(lái)存,一個(gè)服務(wù)器硬盤(pán)可以掛多少终议,肯定滿足不了這么大的數(shù)據(jù)量存儲(chǔ)啊税课,所以,分布式的存儲(chǔ)系統(tǒng)應(yīng)運(yùn)而生痊剖,那就是HDFS分布式文件系統(tǒng)韩玩。簡(jiǎn)單的說(shuō),就是把這么大的數(shù)據(jù)分開(kāi)存在甚至幾百甚至幾千臺(tái)服務(wù)器上陆馁,那么管理他們的系統(tǒng)就是HDFS文件系統(tǒng)找颓,也是大數(shù)據(jù)技術(shù)的最基本的組件。

有地方存了叮贩,需要一些分布式的數(shù)據(jù)庫(kù)來(lái)管理查詢啊击狮,那就有了hbase等,還需要一些組件來(lái)計(jì)算分析這些數(shù)據(jù)啊益老,mapreduce是最基本的計(jì)算框架彪蓬,其他的計(jì)算框架Spark和Storm可以完成實(shí)時(shí)的處理,其中HDFS和MapReduce組成了Hadoop1.

一言以蔽之捺萌,圍繞大數(shù)據(jù)的發(fā)展档冬,新興了大數(shù)據(jù)技術(shù),大數(shù)據(jù)的互聯(lián)網(wǎng)公司桃纯,以及大數(shù)據(jù)技術(shù)的相關(guān)培訓(xùn)公司酷誓,超人學(xué)院就是其中一個(gè)全方位的大數(shù)據(jù)培訓(xùn)公司,因?yàn)槲冶旧硪郧笆亲雠嘤?xùn)的态坦,我是不是在打廣告盐数。。伞梯。

總之玫氢,一切都是數(shù)據(jù)。我們的歷史谜诫,是不是都是大量的數(shù)據(jù)保存下來(lái)的漾峡,現(xiàn)在我們也是大數(shù)據(jù)的生活,天天有沒(méi)有接到騷擾電話還知道你姓什么猜绣,你查話費(fèi)什么的從幾億人的數(shù)據(jù)中查到你的信息灰殴,大數(shù)據(jù)生活。未來(lái)掰邢,大數(shù)據(jù)將更深刻的滲透到生活中牺陶。

想了解更多大數(shù)據(jù)知識(shí)可以到科多大數(shù)據(jù)了解:

http://www.keduox.cn/?service=Personage.index

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市辣之,隨后出現(xiàn)的幾起案子掰伸,更是在濱河造成了極大的恐慌,老刑警劉巖怀估,帶你破解...
    沈念sama閱讀 222,183評(píng)論 6 516
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件狮鸭,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡多搀,警方通過(guò)查閱死者的電腦和手機(jī)歧蕉,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,850評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)康铭,“玉大人惯退,你說(shuō)我怎么就攤上這事〈犹伲” “怎么了催跪?”我有些...
    開(kāi)封第一講書(shū)人閱讀 168,766評(píng)論 0 361
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)夷野。 經(jīng)常有香客問(wèn)我懊蒸,道長(zhǎng),這世上最難降的妖魔是什么悯搔? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 59,854評(píng)論 1 299
  • 正文 為了忘掉前任骑丸,我火速辦了婚禮,結(jié)果婚禮上妒貌,老公的妹妹穿的比我還像新娘者娱。我一直安慰自己,他們只是感情好苏揣,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,871評(píng)論 6 398
  • 文/花漫 我一把揭開(kāi)白布黄鳍。 她就那樣靜靜地躺著,像睡著了一般平匈。 火紅的嫁衣襯著肌膚如雪框沟。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 52,457評(píng)論 1 311
  • 那天增炭,我揣著相機(jī)與錄音忍燥,去河邊找鬼。 笑死隙姿,一個(gè)胖子當(dāng)著我的面吹牛梅垄,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播输玷,決...
    沈念sama閱讀 40,999評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼队丝,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼靡馁!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起机久,我...
    開(kāi)封第一講書(shū)人閱讀 39,914評(píng)論 0 277
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤臭墨,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后膘盖,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體胧弛,經(jīng)...
    沈念sama閱讀 46,465評(píng)論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,543評(píng)論 3 342
  • 正文 我和宋清朗相戀三年侠畔,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了结缚。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,675評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡软棺,死狀恐怖红竭,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情码党,我是刑警寧澤德崭,帶...
    沈念sama閱讀 36,354評(píng)論 5 351
  • 正文 年R本政府宣布,位于F島的核電站揖盘,受9級(jí)特大地震影響眉厨,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜兽狭,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,029評(píng)論 3 335
  • 文/蒙蒙 一憾股、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧箕慧,春花似錦服球、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,514評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至伐庭,卻和暖如春粉渠,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背圾另。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,616評(píng)論 1 274
  • 我被黑心中介騙來(lái)泰國(guó)打工霸株, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人集乔。 一個(gè)月前我還...
    沈念sama閱讀 49,091評(píng)論 3 378
  • 正文 我出身青樓去件,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子尤溜,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,685評(píng)論 2 360

推薦閱讀更多精彩內(nèi)容