我們的數(shù)據(jù)來(lái)自各個(gè)方面坑雅，在面對(duì)龐大而復(fù)雜的大數(shù)據(jù)缸沃，選擇一個(gè)合適的處理工具顯得很有必要宜咒，一個(gè)好的工具不僅可以使我們的工作事半功倍，也可以讓我們?cè)诟?jìng)爭(zhēng)日益激烈的云計(jì)算時(shí)代赘娄，挖掘大數(shù)據(jù)價(jià)值仆潮，及時(shí)調(diào)整戰(zhàn)略方向。
大數(shù)據(jù)是一個(gè)含義廣泛的術(shù)語(yǔ)遣臼，是指數(shù)據(jù)集性置，如此龐大而復(fù)雜的，他們需要專門設(shè)計(jì)的硬件和軟件工具進(jìn)行處理揍堰。該數(shù)據(jù)集通常是萬(wàn)億或EB的大小鹏浅。大數(shù)據(jù)產(chǎn)生的其他例子包括購(gòu)買交易記錄、網(wǎng)絡(luò)日志屏歹、病歷隐砸、事監(jiān)控、視頻和圖像檔案蝙眶、及大型電子商務(wù)季希。大數(shù)據(jù)分析是在研究大量的數(shù)據(jù)的過(guò)程中尋找模式，相關(guān)性和其他有用的信息幽纷，可以幫助企業(yè)更好地適應(yīng)變化式塌，并做出更明智的決策。
一友浸、Hadoop
Hadoop 是一個(gè)能夠?qū)Υ罅繑?shù)據(jù)進(jìn)行分布式處理的軟件框架峰尝。但是 Hadoop 是以一種可靠、高效尾菇、可伸縮的方式進(jìn)行處理的境析。Hadoop 是高效的囚枪，因?yàn)樗圆⑿械姆绞焦ぷ鳎ㄟ^(guò)并行處理加快處理速度劳淆。Hadoop 還是可伸縮的链沼，能夠處理 PB 級(jí)數(shù)據(jù)。此外沛鸵，Hadoop 依賴于社區(qū)服務(wù)器括勺，因此它的成本比較低，任何人都可以使用曲掰。
二疾捍、Storm
Storm是自由的開(kāi)源軟件，一個(gè)分布式的栏妖、容錯(cuò)的實(shí)時(shí)計(jì)算系統(tǒng)乱豆。Storm可以非常可靠的處理龐大的數(shù)據(jù)流吊趾，用于處理Hadoop的批量數(shù)據(jù)宛裕。Storm很簡(jiǎn)單，支持許多種編程語(yǔ)言论泛，使用起來(lái)非常有趣揩尸。Storm有許多應(yīng)用領(lǐng)域：實(shí)時(shí)分析、在線機(jī)器學(xué)習(xí)屁奏、不停頓的計(jì)算岩榆、分布式ETL即數(shù)據(jù)抽取、轉(zhuǎn)換和加載等坟瓢。Storm的處理速度驚人：經(jīng)測(cè) 試勇边，每個(gè)節(jié)點(diǎn)每秒鐘可以處理100萬(wàn)個(gè)數(shù)據(jù)元組。Storm是可擴(kuò)展载绿、容錯(cuò)粥诫，很容易設(shè)置和操作。
三崭庸、Apache Drill
為了幫助企業(yè)用戶尋找更為有效怀浆、加快Hadoop數(shù)據(jù)查詢的方法，Apache軟件基金會(huì)近日發(fā)起了一項(xiàng)名為“Drill”的開(kāi)源項(xiàng)目怕享。
通過(guò)開(kāi)發(fā)“Drill”Apache開(kāi)源項(xiàng)目执赡，組織機(jī)構(gòu)將有望建立Drill所屬的API接口和靈活強(qiáng)大的體系架構(gòu)，從而幫助支持廣泛的數(shù)據(jù)源函筋、數(shù)據(jù)格式和查詢語(yǔ)言沙合。
四、RapidMiner
RapidMiner是世界領(lǐng)先的數(shù)據(jù)挖掘解決方案跌帐，在一個(gè)非常大的程度上有著先進(jìn)技術(shù)首懈。它數(shù)據(jù)挖掘任務(wù)涉及范圍廣泛绊率，包括各種數(shù)據(jù)藝術(shù)，能簡(jiǎn)化數(shù)據(jù)挖掘過(guò)程的設(shè)計(jì)和評(píng)價(jià)究履。
五滤否、Pentaho BI
Pentaho BI平臺(tái)不同于傳統(tǒng)的BI 產(chǎn)品，它是一個(gè)以流程為中心的最仑，面向解決方案的框架藐俺。其目的在于將一系列企業(yè)級(jí)BI產(chǎn)品、開(kāi)源軟件泥彤、API等等組件集成起來(lái)欲芹，方便商務(wù)智能應(yīng)用的開(kāi)發(fā)。
Pentaho BI平臺(tái)構(gòu)建于服務(wù)器吟吝，引擎和組件的基礎(chǔ)之上菱父。這些提供了系統(tǒng)的J2EE 服務(wù)器，安全剑逃，工作流滞伟，規(guī)則引擎，圖表炕贵，協(xié)作，內(nèi)容管理野崇，數(shù)據(jù)集成称开，分析和建模功能。這些組件的大部分是基于標(biāo)準(zhǔn)的乓梨，可使用其他產(chǎn)品替換之鳖轰。
