【編者按】 劉斌，OneAPM后端研發(fā)工程師，擁有10多年編程經驗葫隙，參與過大型金融、通信以及Android手機操作系的開發(fā)畔勤，熟悉Linux及后臺開發(fā)技術懂盐。曾參與翻譯過《第一本...
發(fā)簡信
IP屬地：北京
-
時序列數據庫武斗大會之 OpenTSDB 篇 -
OpenTSDB中的Compaction
Compaction作為一個可選項北启，如果在配置中啟用，則OpenTSDB會啟動一個守護線程蝌麸，在后臺周期性地執(zhí)行compact操作点寥。 OpenTSDB的compact操作，其實...
-
Python語法總結Python 簡明語法總結 !!! 只針對有經驗開發(fā)人員 簡單輸入輸出 輸出print 10 , '十' 輸入name = raw_input() python基礎 數據類型...
-
Spark On YARN 集群安裝部署本文展示了在之前搭建的Hadoop分布式集群的基礎上如何搭建Spark分布式集群環(huán)境 一来吩、已有環(huán)境 ubuntu 14.04hadoop 2.7.1 集群安裝參考三臺機器ma...
-
（基于最新的Kafka version 0.10.2 new consumer API ）想要Spark Streaming精確一次消費Topic敢辩？拿去不謝，記得點贊和分享弟疆！本文基于Spark2.1.0戚长、Kafka 0.10.2、Scala 2.11.8版本 背景： Kafka做為一款流行的分布式發(fā)布訂閱消息系統(tǒng)兽间，以高吞吐历葛、低延時正塌、高可靠的特點著...
-
如何在 Scala 中科學地操作 collection（一）集合類型與操作在日常項目開發(fā)中嘀略，我們幾乎都會用到Scala中的集合以及一些集合操作。由于 Scala 中的集合操作靈活多變乓诽，對于剛接觸Scala的開發(fā)者帜羊，在選用何種集合以及使用何種集合操作...
-
【spark筆記】在idea用maven導入spark源碼一、前提 最近在學習spark鸠天，所以想把spark的源碼導入到idea中方便學習讼育，開始的時候試過很多網上提供的方式折騰了好久沒有成功。最后發(fā)現通過maven導入源碼網絡還需要...
-
Spark Streaming 1.6 流式狀態(tài)管理分析
Spark 1.6發(fā)布后稠集，官方聲稱流式狀態(tài)管理有10倍性能提升奶段。這篇文章會詳細介紹Spark Streaming里新的流式狀態(tài)管理。 關于狀態(tài)管理 在流式計算中剥纷，數據是持續(xù)不...
