【技術(shù)百科】秒懂?dāng)?shù)據(jù)統(tǒng)計(jì)、數(shù)據(jù)挖掘胸懈、大數(shù)據(jù)担扑、OLAP的區(qū)別

導(dǎo)讀:在大數(shù)據(jù)領(lǐng)域里,經(jīng)常會(huì)看到例如數(shù)據(jù)挖掘趣钱、OLAP涌献、數(shù)據(jù)統(tǒng)計(jì)等等的專業(yè)詞匯。如果僅僅從字面上首有,我們很難說清楚每個(gè)詞匯的意義和區(qū)別燕垃。今天枢劝,我們就來通過一些大數(shù)據(jù)在高校應(yīng)用的例子,來為大家說明白—數(shù)據(jù)挖掘卜壕、大數(shù)據(jù)您旁、OLAP、數(shù)據(jù)統(tǒng)計(jì)的區(qū)別轴捎。


數(shù)據(jù)分析

數(shù)據(jù)分析是一個(gè)大的概念鹤盒,理論上任何對(duì)數(shù)據(jù)進(jìn)行計(jì)算、處理從而得出一些有意義的結(jié)論的過程侦副,都叫數(shù)據(jù)分析侦锯。從數(shù)據(jù)本身的復(fù)雜程度、以及對(duì)數(shù)據(jù)進(jìn)行處理的復(fù)雜度和深度來看秦驯,可以把數(shù)據(jù)分析分為以下4個(gè)層次:

數(shù)據(jù)統(tǒng)計(jì)

OLAP

數(shù)據(jù)挖掘

大數(shù)據(jù)

數(shù)據(jù)統(tǒng)計(jì)

數(shù)據(jù)統(tǒng)計(jì)是最基本尺碰、最傳統(tǒng)的數(shù)據(jù)分析,自古有之译隘。是指通過統(tǒng)計(jì)學(xué)方法對(duì)數(shù)據(jù)進(jìn)行

排序亲桥、篩選、運(yùn)算固耘、統(tǒng)計(jì)

等處理两曼,從而得出一些有意義的結(jié)論。

舉例玻驻,對(duì)全年級(jí)學(xué)生按照平均成績(jī)從高到低排序,前10%的學(xué)生可以獲得申請(qǐng)研究生免試資格偿枕。

傳統(tǒng)的查詢和報(bào)表工具是告訴你數(shù)據(jù)庫中有什么(What happened

OLAP

聯(lián)機(jī)分析處理(On-Line Analytical Processing璧瞬,OLAP)是指基于數(shù)據(jù)倉庫的在線多維統(tǒng)計(jì)分析。它允許用戶在線地

從多個(gè)維度觀察某個(gè)度量值渐夸,從而為決策提供支持嗤锉。

舉例,學(xué)校招生時(shí)要決定今年在江蘇的招生指標(biāo)墓塌,不能簡(jiǎn)單地參照去年的計(jì)劃瘟忱,而是要參考多個(gè)維度的數(shù)據(jù)積累。學(xué)校要在這些數(shù)據(jù)的支持下做出合理的決策苫幢。

OLAP更進(jìn)一步告訴你下一步會(huì)怎么樣(What next)访诱,如果我采取這樣的措施又會(huì)怎么樣(What if

數(shù)據(jù)挖掘

數(shù)據(jù)挖掘是指從海量數(shù)據(jù)中找到人們未知的、可能有用的韩肝、隱藏的規(guī)則触菜,可以通過

關(guān)聯(lián)分析、聚類分析哀峻、時(shí)序分析

等各種算法發(fā)現(xiàn)一些無法通過觀察圖表得出的深層次原因涡相。

舉例哲泊,學(xué)校發(fā)現(xiàn)高等數(shù)學(xué)等主干課的不及格率有逐年上升的趨勢(shì),一般認(rèn)為是學(xué)習(xí)不認(rèn)真所致催蝗,但做了很多工作效果并不明縣切威,這時(shí)通過數(shù)據(jù)挖掘……

針對(duì)此可以采取有針對(duì)性的管理措施。

大數(shù)據(jù)

大數(shù)據(jù)是指用現(xiàn)有的計(jì)算機(jī)軟硬件設(shè)施難以采集丙号、存儲(chǔ)先朦、管理、分析和使用的超大規(guī)模的數(shù)據(jù)集槽袄。大數(shù)據(jù)具有

規(guī)模大烙无、種類雜、快速化遍尺、價(jià)值密度低

等特點(diǎn)(4V特性)截酷。大數(shù)據(jù)的“大”是一個(gè)相對(duì)概念,沒有具體標(biāo)準(zhǔn)乾戏,如果一定要給一個(gè)標(biāo)準(zhǔn)迂苛,那么10-100TB通常稱為大數(shù)據(jù)的門檻。

總結(jié)

從數(shù)據(jù)分析的角度來看鼓择,目前絕大多數(shù)學(xué)校的數(shù)據(jù)應(yīng)用產(chǎn)品都還處在數(shù)據(jù)統(tǒng)計(jì)和報(bào)表分析的階段三幻,能夠?qū)崿F(xiàn)有效的OLAP分析與數(shù)據(jù)挖掘的還很少,而能夠達(dá)到大數(shù)據(jù)應(yīng)用階段的非常少呐能,至少還沒有用過有效的大數(shù)據(jù)集念搬。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市摆出,隨后出現(xiàn)的幾起案子朗徊,更是在濱河造成了極大的恐慌,老刑警劉巖偎漫,帶你破解...
    沈念sama閱讀 219,589評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件爷恳,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡象踊,警方通過查閱死者的電腦和手機(jī)温亲,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,615評(píng)論 3 396
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來杯矩,“玉大人栈虚,你說我怎么就攤上這事∈仿。” “怎么了节芥?”我有些...
    開封第一講書人閱讀 165,933評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我头镊,道長(zhǎng)蚣驼,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,976評(píng)論 1 295
  • 正文 為了忘掉前任相艇,我火速辦了婚禮颖杏,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘坛芽。我一直安慰自己留储,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,999評(píng)論 6 393
  • 文/花漫 我一把揭開白布咙轩。 她就那樣靜靜地躺著获讳,像睡著了一般。 火紅的嫁衣襯著肌膚如雪活喊。 梳的紋絲不亂的頭發(fā)上丐膝,一...
    開封第一講書人閱讀 51,775評(píng)論 1 307
  • 那天,我揣著相機(jī)與錄音钾菊,去河邊找鬼帅矗。 笑死,一個(gè)胖子當(dāng)著我的面吹牛煞烫,可吹牛的內(nèi)容都是我干的浑此。 我是一名探鬼主播,決...
    沈念sama閱讀 40,474評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼滞详,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼凛俱!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起料饥,我...
    開封第一講書人閱讀 39,359評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤最冰,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后稀火,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,854評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡赌朋,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,007評(píng)論 3 338
  • 正文 我和宋清朗相戀三年凰狞,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片沛慢。...
    茶點(diǎn)故事閱讀 40,146評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡赡若,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出团甲,到底是詐尸還是另有隱情逾冬,我是刑警寧澤,帶...
    沈念sama閱讀 35,826評(píng)論 5 346
  • 正文 年R本政府宣布,位于F島的核電站身腻,受9級(jí)特大地震影響产还,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜嘀趟,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,484評(píng)論 3 331
  • 文/蒙蒙 一脐区、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧她按,春花似錦牛隅、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,029評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至陵刹,卻和暖如春默伍,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背授霸。 一陣腳步聲響...
    開封第一講書人閱讀 33,153評(píng)論 1 272
  • 我被黑心中介騙來泰國(guó)打工巡验, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人碘耳。 一個(gè)月前我還...
    沈念sama閱讀 48,420評(píng)論 3 373
  • 正文 我出身青樓显设,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親辛辨。 傳聞我的和親對(duì)象是個(gè)殘疾皇子捕捂,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,107評(píng)論 2 356

推薦閱讀更多精彩內(nèi)容