linux安裝java
https://www.cnblogs.com/liugh/p/6623530.html
https://download.oracle.com/otn-pub/java/jdk/8u201-b09/42970487e3af4f5aa5bca3f542482c60/jdk-8u201-linux-x64.tar.gz
/home/user/wz/jdk1.8.0_201
#Java Env
export JAVA_HOME=/usr/jdk1.8.0_121
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin
單機(jī)配置zookeeper
https://www.cnblogs.com/lsdb/p/7297731.html
mkdir data
mkdir logs
在conf目錄下新建zoo.cfg文件,寫(xiě)入以下內(nèi)容保存:
tickTime=2000
dataDir=/home/user/wz/zookeeper-3.5.4-beta/data
dataLogDir=/home/user/wz/zookeeper-3.5.4-beta/logs
clientPort=2181
進(jìn)入bin目錄,啟動(dòng)胖喳、停止仙粱、重啟分和查看當(dāng)前節(jié)點(diǎn)狀態(tài)(包括集群中是何角色)別執(zhí)行:
./zkServer.sh start
./zkServer.sh stop
./zkServer.sh restart
./zkServer.sh status
-----------------------------------------------------------
下載Binary包
https://www.apache.org/dyn/closer.cgi?path=/kafka/2.1.0/kafka_2.11-2.1.0.tgz
bin/kafka-server-start.sh config/server.properties &
# 下面命令需要在logs目錄下創(chuàng)建個(gè)1.log文件藕届,nohub使關(guān)閉shell后進(jìn)程還運(yùn)行
nohup bin/kafka-server-start.sh config/server.properties >logs/1.log 2>&1 &
java.nio.file.NoSuchFileException: config/server.properties
只能從bin目錄上一級(jí)運(yùn)行勺鸦,否則找不到config下的配置
-----------------------------------
使用
-1. 查看幫助信息
bin/kafka-topics.sh --help
-2. 創(chuàng)建Topic
bin/kafka-topics.sh --create --topic test0 --zookeeper 127.0.0.1:2181 --config max.message.bytes=12800000 --config flush.messages=1 --partitions 5 --replication-factor 1
--create : 指定創(chuàng)建topic動(dòng)作
--topic :指定新建topic的名稱(chēng)
--zookeeper : 指定kafka連接zk的連接url妨退,該值和server.properties文件中的配置項(xiàng){zookeeper.connect}一樣
--config :指定當(dāng)前topic上有效的參數(shù)值讽坏,參數(shù)列表參考文檔為: Topic-level configuration
--partitions :指定當(dāng)前創(chuàng)建的kafka分區(qū)數(shù)量锭魔,默認(rèn)為1個(gè)
--replication-factor :指定每個(gè)分區(qū)的復(fù)制因子個(gè)數(shù),默認(rèn)1個(gè)
-3. 查看當(dāng)前Kafka集群中Topic的情況
bin/kafka-topics.sh --list --zookeeper 127.0.0.1:2181
-4. 查看對(duì)應(yīng)topic的描述信息
bin/kafka-topics.sh --describe --zookeeper 127.0.0.1:2181 --topic test0
-5. Topic信息修改
bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --alter --topic test0 --config max.message.bytes=128000
bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --alter --topic test0 --delete-config max.message.bytes
bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --alter --topic test0 --partitions 10
bin/kafka-topics.sh --zookeeper 127.0.0.1:2181 --alter --topic test0 --partitions 3 ## Kafka分區(qū)數(shù)量只允許增加路呜,不允許減少
-6. Topic刪除
bin/kafka-topics.sh --delete --topic test0 --zookeeper 127.0.0.1:2181
啟動(dòng)生產(chǎn)者迷捧,往"test0"這個(gè)Topic中發(fā)送消息:
bin/kafka-console-producer.sh --topic test0 --broker-list 127.0.0.1:9092
啟動(dòng)消費(fèi)者,從"test0"這個(gè)Topic中消費(fèi)消息拣宰,其中"--from-beginning"為可選參數(shù)党涕,表示要從頭消費(fèi)消息:
bin/kafka-console-consumer --bootstrap-server localhost:9092 --topic test0 --from-beginning
-------------------------------------
golang配置
go get github.com/Shopify/sarama
go get github.com/bsm/sarama-cluster
golang kafka 1
最后編輯于 :
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
- 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)姜胖,“玉大人誉帅,你說(shuō)我怎么就攤上這事。” “怎么了蚜锨?”我有些...
- 文/不壞的土叔 我叫張陵档插,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我亚再,道長(zhǎng)郭膛,這世上最難降的妖魔是什么? 我笑而不...
- 正文 為了忘掉前任氛悬,我火速辦了婚禮则剃,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘如捅。我一直安慰自己棍现,他們只是感情好,可當(dāng)我...
- 文/花漫 我一把揭開(kāi)白布伪朽。 她就那樣靜靜地躺著轴咱,像睡著了一般。 火紅的嫁衣襯著肌膚如雪烈涮。 梳的紋絲不亂的頭發(fā)上,一...
- 那天窖剑,我揣著相機(jī)與錄音坚洽,去河邊找鬼。 笑死西土,一個(gè)胖子當(dāng)著我的面吹牛讶舰,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播需了,決...
- 文/蒼蘭香墨 我猛地睜開(kāi)眼跳昼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了肋乍?” 一聲冷哼從身側(cè)響起鹅颊,我...
- 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎墓造,沒(méi)想到半個(gè)月后堪伍,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
- 正文 獨(dú)居荒郊野嶺守林人離奇死亡觅闽,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
- 正文 我和宋清朗相戀三年帝雇,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片蛉拙。...
- 正文 年R本政府宣布,位于F島的核電站茧痕,受9級(jí)特大地震影響野来,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜踪旷,卻給世界環(huán)境...
- 文/蒙蒙 一曼氛、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧令野,春花似錦舀患、人聲如沸。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至现使,卻和暖如春低匙,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背碳锈。 一陣腳步聲響...
- 正文 我出身青樓强重,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親贸人。 傳聞我的和親對(duì)象是個(gè)殘疾皇子间景,可洞房花燭夜當(dāng)晚...
推薦閱讀更多精彩內(nèi)容
- 大致可以通過(guò)上述情況進(jìn)行排除 1.kafka服務(wù)器問(wèn)題 查看日志是否有報(bào)錯(cuò),網(wǎng)絡(luò)訪(fǎng)問(wèn)問(wèn)題等艺智。 2. kafka p...
- kafka安裝目錄下的bin目錄包含了很多運(yùn)維可操作的shell腳本倘要,列舉如下: 接下來(lái)詳細(xì)說(shuō)明每個(gè)腳本的使用方法...
- 什么是消息系統(tǒng)? 早期兩個(gè)應(yīng)用程序間進(jìn)行消息傳遞需要保證兩個(gè)應(yīng)用程序同時(shí)在線(xiàn)力惯,并且耦合度很高碗誉。為了解決應(yīng)用程序不在...
- 說(shuō)起5V5的游戲甲喝,有些梗的確讓人忍俊不禁尝苇,當(dāng)年LOL剛熱起來(lái),作為L(zhǎng)OL的玩家還被大批的DOTA玩家鄙視得要死,現(xiàn)...