SAS如何和HADOOP交互蝗敢、集成?

經(jīng)常有人咨詢恬总,SAS如何和HADOOP交互前普、集成?下面我們大圣眾包(www.dashengzb.cn)小編分享一篇來自CSDN的Anyjack文章。在回答這個問題前壹堰,主要看HADOOP在SAS系統(tǒng)中的定位拭卿,有下面定位考慮:

1.把HADOOP作為傳統(tǒng)數(shù)據(jù)源供SAS訪問

這是最簡單的一種應(yīng)用場景,就是把HADOOP當做類似于ORACLE/DB2等之類的數(shù)據(jù)庫源來使用贱纠,SAS有能力直接在HADOOP上進行數(shù)據(jù)處理峻厚,在HADOOP上進行直接數(shù)據(jù)讀寫

2.把HADOOP作為分析平臺

通過在HADOOP上嵌入SAS分析組件,SAS可以使你在數(shù)秒內(nèi)交互式瀏覽或者分析上十億行記錄谆焊。

配合SAS 的Event Stream Process(實時事件處理引擎)惠桃,你可以實時的分析當前數(shù)據(jù),快速洞悉變化辖试。

3..把HADOOP作為數(shù)據(jù)管理平臺

使用SAS Data Loader for haddop組件辜王,企業(yè)用戶能利用其對HADOOP上的數(shù)據(jù)進行簡單、快速的數(shù)據(jù)清洗罐孝、轉(zhuǎn)換呐馆、數(shù)據(jù)質(zhì)量管理等操作

換另外一種方法來說,SAS針對HADOOP提供有FROM /WITH/IN的能力

FROM

你的數(shù)據(jù)可以來自(FROM)你的HADOOP系統(tǒng)莲兢,你也可以寫數(shù)據(jù)從(FROM)SAS到HADOOP

通過利用SAS/ACCESS to haddop組件或者使用SAS SPDE FOR HADOOP技術(shù)汹来,你能像操作常規(guī)數(shù)據(jù)那樣操作HADOOP

WITH

“With”是利用HADOOP上各個節(jié)點的存儲能力和計算能力并行進行數(shù)據(jù)訪問和處理的能力。而不像是”FROM”抓取改艇、寫入能力收班,存在一個管道來集中接收來自HADOOP的數(shù)據(jù)或者從一個管道往HADOOP中寫入數(shù)據(jù)。

“WITH”可以充分利用HADOOP各個節(jié)點的存儲能力和計算能力谒兄,使HADOOP節(jié)點和SAS節(jié)點間并行交互和計算摔桦,比如SAS產(chǎn)品 Visual Analytics, Visual Statistics, In-Memory Statistics for Hadoop, High Performance Analytic procedures .

IN

“In”就是SAS支持直接在HADOOP中進行計算,所有的操作都在HADOOP內(nèi)部完成承疲,SAS只是負責(zé)提交代碼酣溃、轉(zhuǎn)換SAS代碼為HADOOP代碼(M/R)瘦穆、接收代碼執(zhí)行結(jié)果。

典型的SAS組件有:SAS Code Accelerator for Hadoop, SAS Data Quality Accelerator for Hadoop

希望上述講解能回答HADOOP和SAS的關(guān)系,讓大家對SAS在HADOOP上的應(yīng)用有個比較簡單的理解赊豌。

原文地址:http://www.dashengzb.cn/articles/a-320.html

(更多大數(shù)據(jù)與商業(yè)智能領(lǐng)域干貨扛或、或電子書,可添加個人微信號(dashenghuaer))

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末碘饼,一起剝皮案震驚了整個濱河市熙兔,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌艾恼,老刑警劉巖住涉,帶你破解...
    沈念sama閱讀 218,451評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異钠绍,居然都是意外死亡舆声,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,172評論 3 394
  • 文/潘曉璐 我一進店門柳爽,熙熙樓的掌柜王于貴愁眉苦臉地迎上來媳握,“玉大人,你說我怎么就攤上這事磷脯《暾遥” “怎么了?”我有些...
    開封第一講書人閱讀 164,782評論 0 354
  • 文/不壞的土叔 我叫張陵赵誓,是天一觀的道長打毛。 經(jīng)常有香客問我,道長俩功,這世上最難降的妖魔是什么幻枉? 我笑而不...
    開封第一講書人閱讀 58,709評論 1 294
  • 正文 為了忘掉前任,我火速辦了婚禮诡蜓,結(jié)果婚禮上熬甫,老公的妹妹穿的比我還像新娘。我一直安慰自己万牺,他們只是感情好,可當我...
    茶點故事閱讀 67,733評論 6 392
  • 文/花漫 我一把揭開白布洽腺。 她就那樣靜靜地躺著脚粟,像睡著了一般。 火紅的嫁衣襯著肌膚如雪蘸朋。 梳的紋絲不亂的頭發(fā)上核无,一...
    開封第一講書人閱讀 51,578評論 1 305
  • 那天,我揣著相機與錄音藕坯,去河邊找鬼团南。 笑死噪沙,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的吐根。 我是一名探鬼主播正歼,決...
    沈念sama閱讀 40,320評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼拷橘!你這毒婦竟也來了局义?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,241評論 0 276
  • 序言:老撾萬榮一對情侶失蹤冗疮,失蹤者是張志新(化名)和其女友劉穎萄唇,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體术幔,經(jīng)...
    沈念sama閱讀 45,686評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡另萤,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,878評論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了诅挑。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片四敞。...
    茶點故事閱讀 39,992評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖揍障,靈堂內(nèi)的尸體忽然破棺而出目养,到底是詐尸還是另有隱情,我是刑警寧澤毒嫡,帶...
    沈念sama閱讀 35,715評論 5 346
  • 正文 年R本政府宣布癌蚁,位于F島的核電站,受9級特大地震影響兜畸,放射性物質(zhì)發(fā)生泄漏努释。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,336評論 3 330
  • 文/蒙蒙 一咬摇、第九天 我趴在偏房一處隱蔽的房頂上張望伐蒂。 院中可真熱鬧,春花似錦肛鹏、人聲如沸逸邦。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,912評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽缕减。三九已至,卻和暖如春芒珠,著一層夾襖步出監(jiān)牢的瞬間桥狡,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,040評論 1 270
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留裹芝,地道東北人部逮。 一個月前我還...
    沈念sama閱讀 48,173評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像嫂易,于是被迫代替她去往敵國和親兄朋。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 44,947評論 2 355

推薦閱讀更多精彩內(nèi)容