Kafka快速入門

作者:crane-yuan 日期:2017-08-31


介紹

Apache Kafka was originated at LinkedIn and later became an open sourced Apache project in 2011, then First-class Apache project in 2012. Kafka is written in Scala and Java. Apache Kafka is publish-subscribe based fault tolerant messaging system. It is fast, scalable and distributed by design.

安裝kafka服務(wù)器

kafka啟動(dòng)需要依賴zookeeper和Java8環(huán)境,所以需要先安裝zookeeper和java8

注:本人實(shí)驗(yàn)使用的kafka版本為0.8.2.x

ArchLinux下安裝命令

> yaourt -S zookeeper
> yaourt -S java8
> yaourt -S kafka #可以自己修改PKGBUILD文件帝璧,安裝指定版本

Mac下安裝命令

> brew install zookeeper
>  brew cask install java
> brew install kafka

配置zookeeper

# conf/zoo.cfg

tickTime=2000
dataDir=/var/zookeeper
clientPort=2181

配置kafka

/etc/kafka/server.properties

broker.id=0
auto.create.topics.enable=true # 自動(dòng)創(chuàng)建topic
delete.topic.enable=true # 使刪除topic命令可以起作用
host.name=localhost

zookeeper.connect=localhost:2181

啟動(dòng)kafka server

> sudo zkServer.sh start
> sudo kafka-server-start.sh  /etc/kafka/server.properties # 可以加上-daemon選項(xiàng)在后臺(tái)以守護(hù)進(jìn)程運(yùn)行

創(chuàng)建topic

> kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test-topic

獲取topic列表

> kafka-topics.sh --list --zookeeper localhost:2181 

寫消息到topic

> kafka-console-producer.sh --broker-list localhost:9092 --topic test-topic
# 輸入字符,以回車結(jié)束一條消息

從topic讀取消息

> kafka-console-consumer.sh --zookeeper localhost:2181 --topic test-topic --from-beginning

刪除topic

> kafka-topics.sh --zookeeper localhost:2181 --delete --topic test-topic # server.properties中delete.topic.enable=true設(shè)置時(shí)才有效

參考文章

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末累驮,一起剝皮案震驚了整個(gè)濱河市刨肃,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖黑滴,帶你破解...
    沈念sama閱讀 221,576評(píng)論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異紧索,居然都是意外死亡袁辈,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,515評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門珠漂,熙熙樓的掌柜王于貴愁眉苦臉地迎上來晚缩,“玉大人,你說我怎么就攤上這事媳危≤癖耍” “怎么了?”我有些...
    開封第一講書人閱讀 168,017評(píng)論 0 360
  • 文/不壞的土叔 我叫張陵待笑,是天一觀的道長鸣皂。 經(jīng)常有香客問我,道長滋觉,這世上最難降的妖魔是什么签夭? 我笑而不...
    開封第一講書人閱讀 59,626評(píng)論 1 296
  • 正文 為了忘掉前任,我火速辦了婚禮椎侠,結(jié)果婚禮上第租,老公的妹妹穿的比我還像新娘。我一直安慰自己我纪,他們只是感情好慎宾,可當(dāng)我...
    茶點(diǎn)故事閱讀 68,625評(píng)論 6 397
  • 文/花漫 我一把揭開白布丐吓。 她就那樣靜靜地躺著,像睡著了一般趟据。 火紅的嫁衣襯著肌膚如雪券犁。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 52,255評(píng)論 1 308
  • 那天汹碱,我揣著相機(jī)與錄音粘衬,去河邊找鬼。 笑死咳促,一個(gè)胖子當(dāng)著我的面吹牛稚新,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播跪腹,決...
    沈念sama閱讀 40,825評(píng)論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼褂删,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了冲茸?” 一聲冷哼從身側(cè)響起屯阀,我...
    開封第一講書人閱讀 39,729評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎轴术,沒想到半個(gè)月后难衰,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 46,271評(píng)論 1 320
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡膳音,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,363評(píng)論 3 340
  • 正文 我和宋清朗相戀三年召衔,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片祭陷。...
    茶點(diǎn)故事閱讀 40,498評(píng)論 1 352
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡苍凛,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出兵志,到底是詐尸還是另有隱情醇蝴,我是刑警寧澤,帶...
    沈念sama閱讀 36,183評(píng)論 5 350
  • 正文 年R本政府宣布想罕,位于F島的核電站悠栓,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏按价。R本人自食惡果不足惜惭适,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,867評(píng)論 3 333
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望楼镐。 院中可真熱鬧癞志,春花似錦、人聲如沸框产。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,338評(píng)論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至戒突,卻和暖如春屯碴,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背膊存。 一陣腳步聲響...
    開封第一講書人閱讀 33,458評(píng)論 1 272
  • 我被黑心中介騙來泰國打工导而, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人隔崎。 一個(gè)月前我還...
    沈念sama閱讀 48,906評(píng)論 3 376
  • 正文 我出身青樓嗡载,卻偏偏與公主長得像,于是被迫代替她去往敵國和親仍稀。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,507評(píng)論 2 359

推薦閱讀更多精彩內(nèi)容

  • ** 今天看了一下kafka官網(wǎng)埂息,嘗試著在自己電腦上安裝和配置技潘,然后學(xué)一下官方document。** Introd...
    RainChang閱讀 5,009評(píng)論 1 30
  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理千康,服務(wù)發(fā)現(xiàn)享幽,斷路器,智...
    卡卡羅2017閱讀 134,696評(píng)論 18 139
  • 本教程假設(shè)你是新手拾弃,沒有 Kafka 或 ZooKeeper 的歷史數(shù)據(jù)值桩。由于 Kafka 自帶的控制臺(tái)腳本在 U...
    翼徳閱讀 5,182評(píng)論 0 5
  • Kafka入門經(jīng)典教程-Kafka-about云開發(fā) http://www.aboutyun.com/threa...
    葡萄喃喃囈語閱讀 10,841評(píng)論 4 54
  • 其實(shí)有些時(shí)候,心里的謎團(tuán)不曾著急去解開豪椿。只想著奔坟,凡事皆是天定,天意欲弄人搭盾,管你如何折騰咳秉,也無法改變分毫。就像...
    云紫煙閱讀 213評(píng)論 0 0