作為公司的平臺(tái)部門盖呼,需要給各個(gè)業(yè)務(wù)線提供平臺(tái)的服務(wù)述吸,那么如何建設(shè)一個(gè)滿足各種需求的公司平臺(tái)級(jí)OLAP分析服務(wù)呢截型。首先州弟,一個(gè)開源項(xiàng)目在公司真正落地...

作為公司的平臺(tái)部門盖呼,需要給各個(gè)業(yè)務(wù)線提供平臺(tái)的服務(wù)述吸,那么如何建設(shè)一個(gè)滿足各種需求的公司平臺(tái)級(jí)OLAP分析服務(wù)呢截型。首先州弟,一個(gè)開源項(xiàng)目在公司真正落地...
華為宣布開源了CarbonData項(xiàng)目胀瞪,該項(xiàng)目于6月3日通過Apache社區(qū)投票壹无,成功進(jìn)入Apache孵化器终惑。CarbonData是一種低時(shí)延查...
本篇文章主要講解phoenix與spark做整合,目的是將phoenix做存儲(chǔ)雹有,spark做計(jì)算層偿渡。這樣就結(jié)合了phoenix查詢速度快和spa...
本文根據(jù)2016年7月北京IBM Spark沙龍上的分享講稿整理而成。 大家好霸奕,我是來自GrowingIO的數(shù)據(jù)工程師付旗溜宽,今天跟大家分享的是我...
checkpoint 相當(dāng)于 cache的備胎;checkpoint的數(shù)據(jù)一般都會(huì)放在容錯(cuò)的文件系統(tǒng)當(dāng)中,比如hdfs.一般在做checkpo...
1.優(yōu)化數(shù)據(jù)結(jié)構(gòu) 2.修改并行度 3.對(duì)數(shù)據(jù)做采樣质帅,對(duì)數(shù)據(jù)傾斜的key增加隨機(jī)的前綴. 4.局部聚合+全局聚合 5.ETL 6.盡量不要產(chǎn)生sh...
Ui相關(guān)流程Spark集群?jiǎn)?dòng)之后留攒,我們可以通過Web觀查集群狀態(tài)等信息,這一部分工作是Spark WebUi 模塊實(shí)現(xiàn)涡扼。Servlet容器啟動(dòng)...
作者:Anil Madan** 譯者:張玉宏 文源:LinkeDin 轉(zhuǎn)自:CSDN**PayPal高級(jí)工程總監(jiān)Anil ...