Centos-剛搭建的kafka僚稿,性能如何!

前言

想簡單測試一下剛搭建的kafka的性能怎么樣蟀伸?

可以使用自帶的測試程序進(jìn)行簡單的測試蚀同!

創(chuàng)建測試topic

/opt/kafka_2.12-0.11.0.1

bin/kafka-topics.sh --zookeeper=localhost:2181 --create --topic test --replication-factor 1 --partitions 1

producer吞吐率

只測producer的吞吐率缅刽,也就是數(shù)據(jù)只被持久化,沒有consumer讀數(shù)據(jù)唤崭。

使用官方提供的測試工具kafka-producer-perf-test.sh來測試拷恨。

kafka-producer-perf-test.sh中參數(shù)說明:

topic:生產(chǎn)者發(fā)送的topic

num-records:生產(chǎn)者發(fā)送總的消息數(shù)量

payload-delimiter :payload-file文件里面的分割符,默認(rèn)是換行符

throughput:每秒發(fā)送消息的限制

producer-props:指定kafka生產(chǎn)者的配置谢肾,這個配置優(yōu)先與producer.config

transactional-id:事務(wù)ID腕侄,在測試事物的時候會用到

transaction-duration-ms:事物持續(xù)時間

record-size:每條消息的大小

payload-file:測試消費(fèi)文件

運(yùn)行測試命令:

./bin/kafka-producer-perf-test.sh --topic test --throughput 100000 --num-records 100000 --producer-props bootstrap.servers=localhost:9092 --record-size 1000

consumer吞吐率

使用官方提供的測試工具kafka-consumer-perf-test.sh來測試。

kafka-consumer-perf-test.sh中參數(shù)說明:

zookeeper:zookeeper端口配置

messages:消費(fèi)者消費(fèi)消息總數(shù)量

topic:消費(fèi)者需要消費(fèi)的topic

threads:消費(fèi)者使用幾個線程同時消費(fèi)

group:消費(fèi)者組名稱

socket-buffer-sizesocket: 緩沖大小

fetch-size :每次向kafka broker請求消費(fèi)大小

運(yùn)行測試命令:

bin/kafka-consumer-perf-test.sh --zookeeper localhost:2181 --messages 100000 --topic test --threads 1

總結(jié)

這個只是單節(jié)點(diǎn)的簡單測試芦疏,可以根據(jù)自己的集群情況進(jìn)行參數(shù)調(diào)整冕杠。可以寫成腳本酸茴,同時進(jìn)行生產(chǎn)和消費(fèi)來測試性能分预。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市薪捍,隨后出現(xiàn)的幾起案子笼痹,更是在濱河造成了極大的恐慌,老刑警劉巖酪穿,帶你破解...
    沈念sama閱讀 211,194評論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件凳干,死亡現(xiàn)場離奇詭異,居然都是意外死亡被济,警方通過查閱死者的電腦和手機(jī)救赐,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,058評論 2 385
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來只磷,“玉大人经磅,你說我怎么就攤上這事∨プ罚” “怎么了预厌?”我有些...
    開封第一講書人閱讀 156,780評論 0 346
  • 文/不壞的土叔 我叫張陵,是天一觀的道長元媚。 經(jīng)常有香客問我轧叽,道長,這世上最難降的妖魔是什么惠毁? 我笑而不...
    開封第一講書人閱讀 56,388評論 1 283
  • 正文 為了忘掉前任犹芹,我火速辦了婚禮崎页,結(jié)果婚禮上鞠绰,老公的妹妹穿的比我還像新娘。我一直安慰自己飒焦,他們只是感情好蜈膨,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,430評論 5 384
  • 文/花漫 我一把揭開白布屿笼。 她就那樣靜靜地躺著,像睡著了一般翁巍。 火紅的嫁衣襯著肌膚如雪驴一。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,764評論 1 290
  • 那天灶壶,我揣著相機(jī)與錄音肝断,去河邊找鬼。 笑死驰凛,一個胖子當(dāng)著我的面吹牛胸懈,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播恰响,決...
    沈念sama閱讀 38,907評論 3 406
  • 文/蒼蘭香墨 我猛地睜開眼趣钱,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了胚宦?” 一聲冷哼從身側(cè)響起首有,我...
    開封第一講書人閱讀 37,679評論 0 266
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎枢劝,沒想到半個月后井联,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,122評論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡呈野,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,459評論 2 325
  • 正文 我和宋清朗相戀三年低矮,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片被冒。...
    茶點(diǎn)故事閱讀 38,605評論 1 340
  • 序言:一個原本活蹦亂跳的男人離奇死亡军掂,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出昨悼,到底是詐尸還是另有隱情蝗锥,我是刑警寧澤,帶...
    沈念sama閱讀 34,270評論 4 329
  • 正文 年R本政府宣布率触,位于F島的核電站终议,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏葱蝗。R本人自食惡果不足惜穴张,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,867評論 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望两曼。 院中可真熱鬧皂甘,春花似錦、人聲如沸悼凑。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,734評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至渐夸,卻和暖如春嗤锉,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背墓塌。 一陣腳步聲響...
    開封第一講書人閱讀 31,961評論 1 265
  • 我被黑心中介騙來泰國打工瘟忱, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人苫幢。 一個月前我還...
    沈念sama閱讀 46,297評論 2 360
  • 正文 我出身青樓酷誓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親态坦。 傳聞我的和親對象是個殘疾皇子盐数,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,472評論 2 348

推薦閱讀更多精彩內(nèi)容

  • 送給七年后的自己 你終于實(shí)現(xiàn)了自己的夢想,終于可以面朝大海春暖花開和老公和孩子一起伞梯,享受生活的輕松快樂滿足玫氢! 想學(xué)...
    A憶思特教育趙敏閱讀 332評論 2 2
  • 通過父類、或者接口谜诫,將不同類型的對象向上轉(zhuǎn)型成同一種對象漾峡,同一套方法和屬性,其它的過濾不要喻旷,從而可以使用同一套邏輯...
    果芽軟件閱讀 248評論 0 1