大數(shù)據(jù)和傳統(tǒng)數(shù)據(jù)之間到底差了什么?

在這個(gè)人人都說(shuō)大數(shù)據(jù)的時(shí)代挥唠,許多人對(duì)大數(shù)據(jù)的印象只是停留在仰望的階段抵恋,其實(shí)大數(shù)據(jù)沒(méi)人們說(shuō)得那么神奇、玄乎或者是無(wú)所不能宝磨,今天我們就以傳統(tǒng)數(shù)據(jù)作為比對(duì)弧关,看看大數(shù)據(jù)究竟有什么特點(diǎn)讓其處于時(shí)代的浪潮之巔。

大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)相比的主要特點(diǎn)可以概括為:數(shù)據(jù)量“大”唤锉、數(shù)據(jù)類型“復(fù)雜”世囊、數(shù)據(jù)價(jià)值“無(wú)限”(如圖所示)。

數(shù)據(jù)量大十分好理解窿祥,以前我們存儲(chǔ)數(shù)據(jù)使用的單位是 KB株憾,一個(gè)Excel表格也就幾十到幾百KB,現(xiàn)在我們經(jīng)常說(shuō)到GB甚至是TB乃至PB的數(shù)據(jù)量級(jí)晒衩,它們的數(shù)量關(guān)系如下所示嗤瞎。

???????????????????????????????????????????????????????????????????????????? 1MB=1024KB

???????????????????????????????????????????????????????????????????????????? 1GB=1024MB

???????????????????????????????????????????????????????????????????????????? 1TB=1024GB

???????????????????????????????????????????????????????????????????????????? 1PB=1024TB

更直觀一點(diǎn),1KB相當(dāng)于512個(gè)漢字听系,1MB就相當(dāng)于六本紅樓夢(mèng)的字?jǐn)?shù)……而淘寶網(wǎng)在2015年3月每天大約能產(chǎn)生7TB的數(shù)據(jù)量贝奇,相當(dāng)于4000萬(wàn)本紅樓夢(mèng)的數(shù)據(jù)量,而中國(guó)最大的圖書(shū)館中國(guó)國(guó)家圖書(shū)館的藏書(shū)量是3000萬(wàn)冊(cè)靠胜。

由此看來(lái)掉瞳,我們的大數(shù)據(jù)著實(shí)是數(shù)據(jù)量巨大了届惋。而只說(shuō)能夠產(chǎn)生如此大量數(shù)據(jù)的原因有哪些呢?

我們不妨從數(shù)據(jù)獲取的方式菠赚、數(shù)據(jù)傳輸?shù)姆绞胶蛿?shù)據(jù)存儲(chǔ)的方式來(lái)探討數(shù)據(jù)量大的這個(gè)問(wèn)題脑豹。

數(shù)據(jù)獲取方式的質(zhì)變是大數(shù)據(jù)能夠產(chǎn)生的核心要素。傳統(tǒng)的數(shù)據(jù)獲取方式多是以人工的方式獲取數(shù)據(jù)衡查,最大的特點(diǎn)是手動(dòng)輸入數(shù)據(jù)瘩欺,曾有一段時(shí)間,超市是通過(guò)要求收銀員鍵入用戶特征來(lái)采集用戶數(shù)據(jù)的拌牲,鍵盤(pán)的樣子大體上會(huì)是如圖所示的造型俱饿。

超市通過(guò)這樣的方式來(lái)收集用戶的數(shù)據(jù),試想在超市每天如此大的接待量情況下塌忽,收銀員能否保證數(shù)據(jù)錄入的準(zhǔn)確性呢拍埠?傳統(tǒng)記錄數(shù)據(jù)的方式必定只能是小范圍的,少量的和準(zhǔn)確度欠佳的土居。而現(xiàn)在的數(shù)據(jù)獲取方式大多是通過(guò)URL傳輸和API接口枣购,大體上數(shù)據(jù)獲取的方式有這樣幾類:爬蟲(chóng)抓取、用戶留存擦耀、用戶上傳棉圈、數(shù)據(jù)交易和數(shù)據(jù)共享(如圖所示)。

大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的另一個(gè)顯著差異是數(shù)據(jù)類型的豐富眷蜓。傳統(tǒng)數(shù)據(jù)更注重于對(duì)象的描述分瘾,而大數(shù)據(jù)更傾向與對(duì)數(shù)據(jù)過(guò)程的記錄。為了便于大家理解吁系,下面簡(jiǎn)單的舉個(gè)例子說(shuō)明傳統(tǒng)數(shù)據(jù)與大數(shù)據(jù)的記錄方式有何區(qū)別德召。

傳統(tǒng)數(shù)據(jù)的記錄方式如表所示。

大數(shù)據(jù)的記錄方式如表所示汽纤。

很明顯地看到上岗,傳統(tǒng)數(shù)據(jù)和大數(shù)據(jù)記錄數(shù)據(jù)的最大區(qū)別是大數(shù)據(jù)不僅對(duì)對(duì)象進(jìn)行了描述,還加入了時(shí)間冒版、地點(diǎn)等維度液茎,這樣的數(shù)據(jù)記錄的是一個(gè)過(guò)程。而傳統(tǒng)數(shù)據(jù)的記錄方式更傾向于對(duì)結(jié)果的簡(jiǎn)單描述辞嗡。當(dāng)然捆等,大數(shù)據(jù)能記錄的用戶就餐數(shù)據(jù)遠(yuǎn)不局限于上述所列的字段,理想狀況的大數(shù)據(jù)監(jiān)控甚至?xí)涗浻脩舫燥埖姆绞叫摇⒊燥垥r(shí)的行為栋烤、吃飯時(shí)的面部表情等一系列數(shù)據(jù),這些數(shù)據(jù)反映了用戶對(duì)就餐環(huán)境的感受挺狰,對(duì)餐食口味的反應(yīng)明郭,進(jìn)一步可以用來(lái)改進(jìn)就餐環(huán)境买窟、食物口味,給出點(diǎn)餐建議薯定。

大數(shù)據(jù)與傳統(tǒng)數(shù)據(jù)的核心差異在于其價(jià)值的不可估量始绍。傳統(tǒng)數(shù)據(jù)的價(jià)值體現(xiàn)在信息傳遞與表征,是對(duì)現(xiàn)象的描述與反饋话侄,讓人通過(guò)數(shù)據(jù)去了解數(shù)據(jù)亏推。而大數(shù)據(jù)是對(duì)現(xiàn)象發(fā)生過(guò)程的全記錄,通過(guò)數(shù)據(jù)不僅能夠了解對(duì)象年堆,還能分析對(duì)象吞杭,甚至能了解對(duì)象自己都不知道的信息。

諸如某百科對(duì)一個(gè)人的描述與概括变丧,記錄了這個(gè)人的身高芽狗、體重、出生年月痒蓬、興趣愛(ài)好童擎、日常活動(dòng)谊却、親朋好友等數(shù)據(jù)柔昼,這些算是傳統(tǒng)數(shù)據(jù)哑芹,通過(guò)這些傳統(tǒng)數(shù)據(jù)你能知道和認(rèn)識(shí)這個(gè)人炎辨。如果用大數(shù)據(jù)的方式來(lái)記錄一個(gè)人,那就可以詳細(xì)到他幾點(diǎn)起床聪姿、睡眠質(zhì)量碴萧、身體狀況、每個(gè)時(shí)間點(diǎn)在做什么事等一系列過(guò)程數(shù)據(jù)末购,通過(guò)這些過(guò)程數(shù)據(jù)我們不僅知道和認(rèn)識(shí)這個(gè)人破喻,還能知道他的習(xí)慣性格,甚至能挖掘出隱藏在生活習(xí)慣中的情緒與內(nèi)心活動(dòng)等信息盟榴。這些都是傳統(tǒng)數(shù)據(jù)所無(wú)法體現(xiàn)的曹质,也是大數(shù)據(jù)承載信息的豐富之處,在豐富的信息背后隱藏著巨大的價(jià)值擎场,這些價(jià)值甚至能幫助人們達(dá)到“所思即所得”的境界羽德。

大數(shù)據(jù)價(jià)值的特殊之處就在于它的可挖掘性,同樣的一堆數(shù)據(jù)迅办,不同的人能得到不同層次的東西宅静。就好像同樣見(jiàn)一個(gè)人,有些人只看他的外貌好不好看站欺,有些人能從他的表情中讀出心理活動(dòng)姨夹,從眼神中看出閱歷纤垂,從衣著打扮中讀出品味,從鞋子上讀出生活習(xí)慣磷账。而這些深層次的非表象的內(nèi)容需要技巧與實(shí)力去挖掘出來(lái)峭沦,這就是我們說(shuō)的數(shù)據(jù)分析與數(shù)據(jù)挖掘。


文章來(lái)源

內(nèi)容簡(jiǎn)介

《從1開(kāi)始——數(shù)據(jù)分析師成長(zhǎng)之路》從簡(jiǎn)單的制作報(bào)表開(kāi)始和大家一起學(xué)習(xí)數(shù)據(jù)分析的五大模塊:報(bào)表BI系統(tǒng)逃糟、異常數(shù)據(jù)分析熙侍、解決數(shù)據(jù)需求、項(xiàng)目性數(shù)據(jù)分析以及數(shù)據(jù)建模履磨,為大家全方位蛉抓、體系化地呈現(xiàn)數(shù)據(jù)分析到底是什么。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末剃诅,一起剝皮案震驚了整個(gè)濱河市巷送,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌矛辕,老刑警劉巖笑跛,帶你破解...
    沈念sama閱讀 218,284評(píng)論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異聊品,居然都是意外死亡飞蹂,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,115評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門(mén)翻屈,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)陈哑,“玉大人,你說(shuō)我怎么就攤上這事伸眶【眩” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 164,614評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵厘贼,是天一觀的道長(zhǎng)界酒。 經(jīng)常有香客問(wèn)我,道長(zhǎng)嘴秸,這世上最難降的妖魔是什么毁欣? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,671評(píng)論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮岳掐,結(jié)果婚禮上凭疮,老公的妹妹穿的比我還像新娘。我一直安慰自己岩四,他們只是感情好哭尝,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,699評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著剖煌,像睡著了一般材鹦。 火紅的嫁衣襯著肌膚如雪逝淹。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 51,562評(píng)論 1 305
  • 那天桶唐,我揣著相機(jī)與錄音栅葡,去河邊找鬼。 笑死尤泽,一個(gè)胖子當(dāng)著我的面吹牛欣簇,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播坯约,決...
    沈念sama閱讀 40,309評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼熊咽,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了闹丐?” 一聲冷哼從身側(cè)響起横殴,我...
    開(kāi)封第一講書(shū)人閱讀 39,223評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎卿拴,沒(méi)想到半個(gè)月后衫仑,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,668評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡堕花,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,859評(píng)論 3 336
  • 正文 我和宋清朗相戀三年文狱,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片缘挽。...
    茶點(diǎn)故事閱讀 39,981評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡瞄崇,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出到踏,到底是詐尸還是另有隱情杠袱,我是刑警寧澤,帶...
    沈念sama閱讀 35,705評(píng)論 5 347
  • 正文 年R本政府宣布窝稿,位于F島的核電站,受9級(jí)特大地震影響凿掂,放射性物質(zhì)發(fā)生泄漏伴榔。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,310評(píng)論 3 330
  • 文/蒙蒙 一庄萎、第九天 我趴在偏房一處隱蔽的房頂上張望踪少。 院中可真熱鬧,春花似錦糠涛、人聲如沸援奢。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,904評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)集漾。三九已至切黔,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間具篇,已是汗流浹背纬霞。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,023評(píng)論 1 270
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留驱显,地道東北人诗芜。 一個(gè)月前我還...
    沈念sama閱讀 48,146評(píng)論 3 370
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像埃疫,于是被迫代替她去往敵國(guó)和親伏恐。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,933評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容

  • //我所經(jīng)歷的大數(shù)據(jù)平臺(tái)發(fā)展史(三):互聯(lián)網(wǎng)時(shí)代 ? 上篇http://www.infoq.com/cn/arti...
    葡萄喃喃囈語(yǔ)閱讀 51,225評(píng)論 10 200
  • 數(shù)據(jù)智慧給你講講:大數(shù)據(jù)究竟是什么 零栓霜、解構(gòu)大數(shù)據(jù) 首先脐湾,大數(shù)據(jù)就是互聯(lián)網(wǎng)發(fā)展到現(xiàn)今階段的一種表象或特征而已,沒(méi)有...
    戰(zhàn)敭閱讀 1,967評(píng)論 0 24
  • 給你一個(gè)白鷺洲叙淌,許我一世蒹葭夢(mèng)秤掌,可好? 蒹葭蒼蒼鹰霍,白露為霜闻鉴。 所謂伊人,在水一方茂洒。 白露止孟岛,霜降至,我依稀記得你愛(ài)...
    梅園遺珠閱讀 389評(píng)論 0 3
  • 早晨督勺,先生一早出門(mén)渠羞,正好兒子帶去上學(xué)。我也一早起來(lái)智哀,為兒子家校聯(lián)系本上簽字次询,愿他有勇氣有信心去面對(duì)難題。主動(dòng)請(qǐng)教瓷叫、...
    葦絮輕揚(yáng)閱讀 167評(píng)論 0 3
  • 臘月二十九屯吊,清早,父親帶著我到半糖走差摹菠,十余里的路需翻越幾座山坡盒卸,父親在前面走著,從我眼前的一座山坡頂端慢慢消失次氨,...
    仲兄閱讀 303評(píng)論 0 1