發(fā)簡信
IP屬地：廣東
-
Hive注釋中文亂碼
創(chuàng)建表的時候，comment說明字段包含中文枉疼，表成功創(chuàng)建成功之后皮假，中文說明顯示亂碼 創(chuàng)建完成后查看 這是因為在MySQL中的元數(shù)據(jù)出現(xiàn)亂碼 針對...
-
Kafka Manager安裝
Kafka Manager安裝 1.sbt安裝 官方安裝說明 驗證安裝 2.Kafka Manager安裝 獲取安裝包 GitHub地址 解壓安...
-
hadoop小文件問題
文檔目錄 什么是小文件 小文件產(chǎn)生的原因 小文件引起的問題 小文件解決方案 如何選擇小文件解決方案 什么是小文件 小文件的定義和hadoop中...
-
安裝擴展包(Install External Libraries)在CDH平臺上為Streamsets導(dǎo)入擴展包前, 先設(shè)置一個用來存儲這些擴展包的目錄 在Cloundera管理平臺界面中, 選擇StreamS...
-
StreamSets update和delete分離之后導(dǎo)致的操作順序錯亂現(xiàn)象： 當(dāng)期的操作流程如下圖： 這樣的處理流程會造成如下問題： 1、當(dāng)binlog解析出的批次數(shù)據(jù)中骂维，數(shù)據(jù)包含了對同一條數(shù)據(jù)的刪除和修改操作時惹资，...
-
otter基礎(chǔ)一、otter介紹 阿里巴巴B2B公司航闺，因為業(yè)務(wù)的特性褪测，賣家主要集中在國內(nèi)，買家主要集中在國外潦刃，所以衍生出了杭州和美國異地機房的需求侮措，同時為了提...
-
hive 優(yōu)化
原文地址 Apache Hive是一個類似SQL的軟件，與Hadoop一起使用乖杠，使用戶能夠快速高效地使用自己的語言HiveQL執(zhí)行類似SQL的查...
-
Flume基礎(chǔ)案例
核心概念 Agent:使用JVM 運行Flume分扎。每臺機器運行一個agent，但是可以在一個agent中包含多個sources和sinks胧洒。Cl...
-
spark 內(nèi)存管理內(nèi)容目錄 JVM 內(nèi)存使用架構(gòu)剖析 Spark 1.6.x以前版本內(nèi)存管理 Spark on Yarn 計算內(nèi)存使用案例 Spark Unifi...