kafka的命令總結(jié)和kafka集群的優(yōu)點(diǎn)2019-12-11(小白白)

描述主題的配置

bin/kafka-configs.sh --zookeeper localhost:2181 --describe --entity-type topics --entity-name test_topic

設(shè)置保留時(shí)間

# Deprecated way

bin/kafka-topics.sh --zookeeper localhost:2181 --alter --topic test_topic --config retention.ms=1000

# Modern way

bin/kafka-configs.sh --zookeeper localhost:2181 --alter --entity-ty

在使用kafka默認(rèn)安裝的zookeeper啟動(dòng)是的命令是

/opt/kafka/bin/zookeeper-server-start.sh /opt/kafka/config/zookeeper.properties

使用我們自己安裝的zookeeper啟動(dòng)命令是:

./zkServer.sh start

啟動(dòng)kafka

/opt/kafka/bin/kafka-server-start.sh /opt/kafka/config/server.properties

創(chuàng)建主題:

/opt/kafka/bin/kafka-topic.sh --create --zookeeper localhost:2181 --replication-factor 1? --partitions 1 --topic 1707d

查看主題:

/opt/kafka/bin/kafka-topics.sh --list 1707d --zookeeper localhost:2181

服務(wù)器端:

/opt/kafka/bin/kafka-console-producer.sh --broker-list localhost:9092 --topic 1707d

客戶端的命令:

/opt/kafka/bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic 1707d (--from-beginning)

從第一行可以看到這個(gè)命令可以修改 topic, client, user 或 broker 的配置栖博。

如果要設(shè)置 topic,就需要設(shè)置 entity-type 為topics榕订,輸入如下命令:

> bin/kafka-configs.sh --entity-type topics

Command must include exactly one action: --describe, --alter

命令提示需要指定一個(gè)操作(不只是上面提示的兩個(gè)操作)冈止,增加--describe試試:

> bin/kafka-configs.sh --entity-type topics --describe

[root@localhost kafka_2.11-0.10.2.1]# bin/kafka-configs.sh --entity-type topics --describe

Missing required argument "[zookeeper]"

繼續(xù)增加 --zookeeper:

> bin/kafka-configs.sh --entity-type topics --describe --zookeeper localhost:2181

Configs for topic '__consumer_offsets' are segment.bytes=104857600,cleanup.policy=compact,compression.type=producer

由于沒有指定主題名锯茄,這里顯示了__consumer_offsets的信息细卧。下面指定一個(gè)topic試試鹃彻。

> bin/kafka-configs.sh --entity-type topics --describe --zookeeper localhost:2181 --entity-name test

Configs for topic 'test' are

此時(shí)顯示了test主題的信息技肩,這里是空。

因?yàn)镵afka完善的命令提示,可以很輕松的通過提示信息來進(jìn)行下一步操作虚婿,運(yùn)用熟練后旋奢,基本上很快就能實(shí)現(xiàn)自己想要的命令。

pe topics --entity-name test_topic --add-config retention.ms=1000

如果您需要?jiǎng)h除主題中的所有消息然痊,則可以利用保留時(shí)間至朗。首先將保留時(shí)間設(shè)置為非常低(1000 ms),等待幾秒鐘剧浸,然后將保留時(shí)間恢復(fù)為上一個(gè)值锹引。

注意:默認(rèn)保留時(shí)間為24小時(shí)(86400000毫秒)。

刪除主題

bin/kafka-topics.sh --zookeeper localhost:2181 --delete --topic test_topic

注意:需要在Broker的配置文件server.properties中配置 delete.topic.enable=true 才能刪除主題唆香。

主題信息

bin/kafka-topics.sh --describe --zookeeper localhost:2181 --topic test_topic

添加分區(qū)

bin/kafka-topics.sh --alter --zookeeper localhost:2181 --topic test_topic --partitions 3

創(chuàng)建主題

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 3 --topic test_topic

列出主題

bin/kafka-topics.sh --list --zookeeper localhost:2181

關(guān)于集群方面嫌变,我總結(jié)的幾個(gè)點(diǎn)就在于,不管是我們開啟的那個(gè)服務(wù)躬它,數(shù)據(jù)都是可以聯(lián)想的腾啥,yes,完畢

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
禁止轉(zhuǎn)載,如需轉(zhuǎn)載請(qǐng)通過簡(jiǎn)信或評(píng)論聯(lián)系作者冯吓。
  • 序言:七十年代末倘待,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子组贺,更是在濱河造成了極大的恐慌凸舵,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,591評(píng)論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件失尖,死亡現(xiàn)場(chǎng)離奇詭異啊奄,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)掀潮,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,448評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門菇夸,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人胧辽,你說我怎么就攤上這事峻仇。” “怎么了邑商?”我有些...
    開封第一講書人閱讀 162,823評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵摄咆,是天一觀的道長。 經(jīng)常有香客問我人断,道長吭从,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,204評(píng)論 1 292
  • 正文 為了忘掉前任恶迈,我火速辦了婚禮涩金,結(jié)果婚禮上谱醇,老公的妹妹穿的比我還像新娘。我一直安慰自己步做,他們只是感情好副渴,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,228評(píng)論 6 388
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著全度,像睡著了一般煮剧。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上将鸵,一...
    開封第一講書人閱讀 51,190評(píng)論 1 299
  • 那天勉盅,我揣著相機(jī)與錄音,去河邊找鬼顶掉。 笑死草娜,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的痒筒。 我是一名探鬼主播宰闰,決...
    沈念sama閱讀 40,078評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼凸克!你這毒婦竟也來了议蟆?” 一聲冷哼從身側(cè)響起闷沥,我...
    開封第一講書人閱讀 38,923評(píng)論 0 274
  • 序言:老撾萬榮一對(duì)情侶失蹤萎战,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,334評(píng)論 1 310
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡晨雳,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,550評(píng)論 2 333
  • 正文 我和宋清朗相戀三年宿百,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片爵嗅。...
    茶點(diǎn)故事閱讀 39,727評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出涂籽,到底是詐尸還是另有隱情,我是刑警寧澤砸抛,帶...
    沈念sama閱讀 35,428評(píng)論 5 343
  • 正文 年R本政府宣布评雌,位于F島的核電站,受9級(jí)特大地震影響直焙,放射性物質(zhì)發(fā)生泄漏景东。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,022評(píng)論 3 326
  • 文/蒙蒙 一奔誓、第九天 我趴在偏房一處隱蔽的房頂上張望斤吐。 院中可真熱鬧,春花似錦、人聲如沸和措。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,672評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽派阱。三九已至抒痒,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間颁褂,已是汗流浹背故响。 一陣腳步聲響...
    開封第一講書人閱讀 32,826評(píng)論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留颁独,地道東北人彩届。 一個(gè)月前我還...
    沈念sama閱讀 47,734評(píng)論 2 368
  • 正文 我出身青樓,卻偏偏與公主長得像誓酒,于是被迫代替她去往敵國和親樟蠕。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,619評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容

  • kafka安裝目錄下的bin目錄包含了很多運(yùn)維可操作的shell腳本靠柑,列舉如下: 接下來詳細(xì)說明每個(gè)腳本的使用方法...
    阿飛的博客閱讀 9,769評(píng)論 5 15
  • 小結(jié): 本篇博客寨辩,介紹三種安裝Kafka的方式,分別為:?jiǎn)喂?jié)點(diǎn)單Broker部署歼冰、單節(jié)點(diǎn)多Broker部署靡狞、集群部...
    先生zeng閱讀 7,122評(píng)論 0 1
  • 什么是消息系統(tǒng)? 早期兩個(gè)應(yīng)用程序間進(jìn)行消息傳遞需要保證兩個(gè)應(yīng)用程序同時(shí)在線隔嫡,并且耦合度很高甸怕。為了解決應(yīng)用程序不在...
    Java小鋪閱讀 1,212評(píng)論 0 2
  • 1.2 使用案例 消息處理 kafka是一個(gè)很好的傳統(tǒng)消息代理(message broker)替代產(chǎn)品。使用消息代...
    我的小南瓜閱讀 939評(píng)論 0 0
  • 什么是多態(tài) 簡(jiǎn)單的說:當(dāng)你寫完一個(gè)程序腮恩,我僅僅是知道調(diào)一個(gè)方法梢杭,我不確定他是調(diào)基類還是子類的,真正在執(zhí)行的那一剎那...
    test小星星閱讀 158評(píng)論 0 0