如果你是一個(gè)和大數(shù)據(jù)、實(shí)時(shí)計(jì)算打交道多年的工程師,那你一定對(duì)ApacheKafka不陌生。這個(gè)消息隊(duì)列界的“扛把子”,以其超高的吞吐量和可靠性,支撐著無(wú)數(shù)公司的核心業(yè)務(wù)。
但是,只要一提到Kafka運(yùn)維,很多老司機(jī)的嘴角都會(huì)泛起一絲苦澀...為啥?還不是因?yàn)樗澈竽莻€(gè)讓人又愛(ài)又恨的“動(dòng)物園管理員”——ZooKeeper!
部署一套生產(chǎn)級(jí)Kafka,你得先伺候好一個(gè)ZK集群。網(wǎng)絡(luò)一抖,ZK掛了,Kafka跟著“腦裂”;想給Kafka擴(kuò)容,還得小心翼翼地看ZK的“臉色”。運(yùn)維Kafka,一半的精力都花在了ZK身上,這痛,誰(shuí)懂???!
但是,好消息來(lái)了!
隨著Kafka4.0的正式發(fā)布,這一切都將成為歷史!Kafka社區(qū)放出了終極大招:徹底移除ZooKeeper,全面擁抱自家的KRaft(KafkaRaft)協(xié)議!
這意味著什么?
架構(gòu)極大簡(jiǎn)化:部署一個(gè)Kafka集群,不再需要另一套獨(dú)立的ZK集群。更少的組件=更低的復(fù)雜性=更少的出錯(cuò)點(diǎn)!運(yùn)維幸福感直線飆升!
啟動(dòng)速度起飛:以前重啟一個(gè)Broker,光是從ZK同步元數(shù)據(jù)就要半天。現(xiàn)在KRaft模式下,啟動(dòng)速度快到飛起,秒級(jí)恢復(fù)不是夢(mèng)!
性能和擴(kuò)展性增強(qiáng):KRaft模式可以支持更多的分區(qū),集群的擴(kuò)展能力達(dá)到了一個(gè)新的量級(jí),為未來(lái)的超大規(guī)模場(chǎng)景鋪平了道路。
運(yùn)維更絲滑:集群的元數(shù)據(jù)管理和數(shù)據(jù)流處理使用同一套協(xié)議,問(wèn)題排查更直觀,運(yùn)維小哥再也不用在兩個(gè)系統(tǒng)之間反復(fù)橫跳了。
總之一句話:Kafka4.0,讓運(yùn)維的春天,真的來(lái)了!
嘗鮮體驗(yàn):30秒擁有你的第一個(gè)Kafka4.0
光說(shuō)不練假把式!咱們直接上干貨,用Docker感受一下KRaft模式的極速體驗(yàn)。電腦上裝好Docker就行!
打開(kāi)你的終端,運(yùn)行下面的命令:
不出意外,幾十秒后,一個(gè)功能完整的、不需要ZK的單節(jié)點(diǎn)Kafka4.0就已經(jīng)歡快地跑起來(lái)了!是不是簡(jiǎn)單到有點(diǎn)不適應(yīng)?
免責(zé)聲明:本文內(nèi)容由開(kāi)放的智能模型自動(dòng)生成,僅供參考。