發(fā)簡信
IP屬地：江蘇
-
-
CarbonData Carbon Thrift Server集成OSS - 測試步驟環(huán)境信息：CarbonData Carbon Thrift Server集成OSS - 環(huán)境搭建 1、運(yùn)行carbondata thrift server /home/car...
-
CarbonData Carbon Thrift Server集成OSS - 環(huán)境搭建
1俐镐、基礎(chǔ)環(huán)境 見：CarbonData集成OSS - 基礎(chǔ)環(huán)境搭建 2、spark環(huán)境 3哺哼、配置carbondata和spark 1） carbon.properties在c...
-
CarbonData SDK集成OSS - 測試步驟1佩抹、環(huán)境搭建 見：CarbonData集成OSS - 基礎(chǔ)環(huán)境搭建 2、執(zhí)行如下命令 java -classpath /home/carbondata/carbondata/...
-
CarbonData集成OSS - 基礎(chǔ)環(huán)境搭建
第一步：構(gòu)建CarbonData 見CarbonData 構(gòu)建過程 第二步：搭建偽分布式集群 見CarbonData hadoop偽分布式集群搭建 第三步：OSS bucke...
-
CarbonData OSS Bucket管理第一步:購買阿里云oss 三個(gè)字取董，很便宜棍苹。 第二步：參照圖中所示步驟進(jìn)行oss bucket創(chuàng)建 第三步：創(chuàng)建目錄 /carbon/session/data/store，后續(xù)...
-
CarbonData Hadoop偽分布式集群搭建此篇文章基于上一篇carbondata 構(gòu)建過程甲葬。 1廊勃、可為carbondata用戶增加管理員權(quán)限，避免一些對新手來說比較棘手的權(quán)限問題 以root賬號登錄，并輸入visud...
-
CarbonData 構(gòu)建過程
1坡垫、準(zhǔn)備類Unix環(huán)境(Linux, Mac OS X) 筆者在阿里云上申請了一臺ECS梭灿，系統(tǒng)為CentOS 7.6 64位。 2冰悠、準(zhǔn)備git環(huán)境 3堡妒、Oracle Java...
-
Kafka 的七年之癢
自從 2011 年被捐獻(xiàn)給 Apache 基金會到現(xiàn)在，Kafka 項(xiàng)目已經(jīng)走過了七個(gè)年頭溉卓。作為一個(gè)優(yōu)秀的分布式消息系統(tǒng)皮迟，Kafka 已經(jīng)被許多企業(yè)采用并成為其大數(shù)據(jù)架構(gòu)中不...
-
@飛奔的阿甘 swagger2
Swagger工程化實(shí)踐
1、從零開始新增API 1.1桑寨、編寫Swagger API并保存為api.yaml到本地 打開Swagger editor API文檔編輯工具（通過單擊下面社區(qū)鏈接）社區(qū)：h...
-
【Kafka零基礎(chǔ)學(xué)習(xí)】Producer授權(quán)
1伏尼、使用環(huán)境 kafka版本1.0.1kafka集群使用SASL_PLAINTEXT安全認(rèn)證Broker屬性auto.create.topics.enable=true Pr...
-
【Kafka零基礎(chǔ)學(xué)習(xí)】Kafka1.0.1安全認(rèn)證
1、安全概覽 社區(qū)從kafka 0.9.0.0開始支持安全機(jī)制功能尉尾，這些安全機(jī)制可以單獨(dú)或混合使用爆阶。 1.1、客戶端（producer沙咏、consumer辨图、tool）與brok...
-
【Kafka零基礎(chǔ)學(xué)習(xí)】如何在Kafka Kerberos環(huán)境中創(chuàng)建和刪除Topic1、使用基礎(chǔ)信息 Kafka版本1.0.1Zookeeper版本3.4.6Ranger版本1.1.0Kerberos版本1.10.3-30兩個(gè)賬號：啟動Kafka服務(wù)的kaf...
-
【Kafka零基礎(chǔ)學(xué)習(xí)】模擬線上broker宕機(jī)處理過程
環(huán)境說明： 1肢藐、1個(gè)zookeeper故河，3個(gè)kafka broker在同一主機(jī)。 1吆豹、創(chuàng)建一個(gè)test topic（3分區(qū)鱼的、3副本） kafka-topics.bat --c...
-
【Kafka零基礎(chǔ)學(xué)習(xí)】如何用命令行生產(chǎn)或消費(fèi)kerberos kafka集群
前提： 1、kafka版本1.0.12痘煤、在linux中使用kinit刷新kerberos認(rèn)證信息 1鸳吸、生產(chǎn)者 1.1、準(zhǔn)備jaas.conf并添加到環(huán)境變量 文件內(nèi)容為：Ka...
-
Hue支持Hdp3.0 Oozie1速勇、問題描述 當(dāng)在HDP中配置了Oozie的SSO后晌砾，會發(fā)現(xiàn)在Hue中提交oozie workflow失敗異常。在解決問題的過程中烦磁，共出現(xiàn)了兩個(gè)異常养匈。第二個(gè)異常是在解決第一個(gè)...
-
Swagger工程化實(shí)踐1、從零開始新增API 1.1都伪、編寫Swagger API并保存為api.yaml到本地 打開Swagger editor API文檔編輯工具（通過單擊下面社區(qū)鏈接）社區(qū)：h...
-
【Kafka零基礎(chǔ)學(xué)習(xí)】記一Leader選舉問題排查過程1呕乎、異常信息 2、排查過程 從下面這張圖中可以看出某一topic某一分區(qū)的leader副本節(jié)點(diǎn)掛了陨晶。由于唯一活著的144節(jié)點(diǎn)猬仁，分區(qū)副本已不再ISR集合中帝璧，再加上unClean...
-
【軟件架構(gòu)篇】互聯(lián)網(wǎng)架構(gòu)模板
1、互聯(lián)網(wǎng)標(biāo)準(zhǔn)技術(shù)架構(gòu)圖 架構(gòu)圖如下圖所示湿刽。這張圖基本涵蓋了互聯(lián)網(wǎng)技術(shù)公司的大部分技術(shù)點(diǎn)的烁，不同公司只是在具體的技術(shù)實(shí)現(xiàn)上稍有差異，但不會跳出這個(gè)框架的范疇诈闺。 2渴庆、存儲層 SQ...
