之前用的版本是zeppelin0.7.2和spark1.6浩考，最近把zeppelin升級到0.8發(fā)現(xiàn)1.6的配置和2.2的配置默認(rèn)都無法支持捐祠，大概會(huì)遇到3個(gè)問題价捧。 Incomp...
發(fā)簡信
IP屬地：福建
-
zeppelin 0.8環(huán)境和spark2.2問題
-
IGNITE應(yīng)用實(shí)踐前言：Ignite是一個(gè)以內(nèi)存為中心的數(shù)據(jù)平臺酷宵，具有數(shù)據(jù)強(qiáng)一致钩乍、高可用溺拱、支持標(biāo)準(zhǔn)SQL的特性。Ignite從2015年加入apache以來備受關(guān)注蝙泼，截至發(fā)文ignite已更新...
-
@AmgenYU PS
Spark蓋中蓋（一篇頂五篇）-1 RDD的數(shù)據(jù)結(jié)構(gòu)模型
前言：自Google發(fā)表三大論文GFS程剥、MapReduce、BigTable以來汤踏，衍生出的開源框架越來越多织鲸，其中Hadoop更是以高可用、高擴(kuò)展溪胶、高容錯(cuò)等特性形成了開源工業(yè)界...
-
-
Kafka 詳解（轉(zhuǎn)）
一、入門1哗脖、簡介Kafka is a distributed,partitioned,replicated commit logservice瀑踢。它提供了類似于JMS的特性，但...
-
Spark蓋中蓋（一篇頂五篇）-3 DAG詳解前方高能才避，減速慢行橱夭！ 看過了Spark的核心RDD和RDD算子以后，感覺Spark是不是很神奇工扎，竟然可以減少計(jì)算次數(shù)徘钥，優(yōu)化計(jì)算衔蹲。對于窄依賴是這樣的肢娘，但是寬依賴怎么辦？還是要等...
-
Spark蓋中蓋（一篇頂五篇）-3 DAG詳解
前方高能舆驶，減速慢行橱健！ 看過了Spark的核心RDD和RDD算子以后，感覺Spark是不是很神奇沙廉，竟然可以減少計(jì)算次數(shù)拘荡，優(yōu)化計(jì)算。對于窄依賴是這樣的撬陵，但是寬依賴怎么辦珊皿？還是要等...
-
spark mllib支持哪些機(jī)器學(xué)習(xí)算法？
Spark 2.1 Mllib考慮到spark選型做mllib的人巨税，最關(guān)心問題蟋定，就是spark mllib能夠支持多少機(jī)器學(xué)習(xí)的算法呢？問題很簡單草添，就下面這么多驶兜，你看著用吧。...
-
Spark蓋中蓋（一篇頂五篇）-2 RDD算子詳解前方高能減速慢行！ 在上一篇RDD結(jié)構(gòu)已經(jīng)介紹完了抄淑。雖然RDD結(jié)構(gòu)是spark設(shè)計(jì)思想最重要的組成屠凶，但是沒有輔助的功能只有結(jié)構(gòu)又不能獨(dú)立使用。真正使RDD完成計(jì)算優(yōu)化的肆资，就是...
-
Spark蓋中蓋（一篇頂五篇）-2 RDD算子詳解
前方高能減速慢行矗愧！ 在上一篇RDD結(jié)構(gòu)已經(jīng)介紹完了。雖然RDD結(jié)構(gòu)是spark設(shè)計(jì)思想最重要的組成郑原，但是沒有輔助的功能只有結(jié)構(gòu)又不能獨(dú)立使用贱枣。真正使RDD完成計(jì)算優(yōu)化的，就是...
-
spark mllib支持哪些機(jī)器學(xué)習(xí)算法颤专？
Spark 2.1 Mllib考慮到spark選型做mllib的人纽哥，最關(guān)心問題，就是spark mllib能夠支持多少機(jī)器學(xué)習(xí)的算法呢栖秕？問題很簡單春塌，就下面這么多，你看著用吧簇捍。...
-
原首頁投稿專題 現(xiàn)暫停使用吼句。 具體請查看：簡書新版發(fā)現(xiàn)頁文章推薦系統(tǒng)上線公告 http://www.reibang.com/p/6c47b3244644
-
Spark蓋中蓋（一篇頂五篇）-1 RDD的數(shù)據(jù)結(jié)構(gòu)模型前言：自Google發(fā)表三大論文GFS、MapReduce事格、BigTable以來惕艳，衍生出的開源框架越來越多，其中Hadoop更是以高可用驹愚、高擴(kuò)展远搪、高容錯(cuò)等特性形成了開源工業(yè)界...
-
點(diǎn)擊流平臺
我：您好MASTER 09:25:24您好，有什么事嗎我 09:53:54您好想問一些技術(shù)問題 不知道您有時(shí)間沒MASTER 09:55:10spark相關(guān)的嗎您說什么...
-
kafka 組成 原理 詳解 架構(gòu)
數(shù)據(jù)正確性保證日志功能里有一個(gè)配置參數(shù)M逢捺，可對在強(qiáng)制進(jìn)行磁盤刷新之前可寫入的消息的最大條目數(shù)進(jìn)行控制谁鳍。在系統(tǒng)啟動(dòng)時(shí)會(huì)運(yùn)行一個(gè)日志恢復(fù)過程，對最新的日志段內(nèi)所有消息進(jìn)行迭代劫瞳，以...
-
paxos算法java代碼實(shí)現(xiàn)
paxos算法以其難以理解而著稱倘潜，主要體現(xiàn)在兩個(gè)方面： 1、Lamport最初的論文以敘事的方式敘述了算法核心 2志于、算法即使有非常嚴(yán)謹(jǐn)?shù)耐茖?dǎo)過程也很難被確定為嚴(yán)格正確的（但目...
