使用kafka-console-consumer.sh不停報(bào)WARN的問(wèn)題及解決
kafka-console-consumer.sh不停報(bào)WARN的解決
首先確認(rèn)你的服務(wù)器你所需要的所有端口都打開(kāi)了!
./kafka-console-consumer.sh --bootstrap-server 宿主機(jī)IP:9092 --topic 主題名 --from-beginning
端口都打開(kāi)的情況使用以上命令還繼續(xù)各種報(bào)WARN請(qǐng)檢查kafka相關(guān)配置
listeners=PLAINTEXT://*********:9092
以上*處配置IP應(yīng)為宿主機(jī)IP地址一致
./kafka-console-consumer.sh --bootstrap-server *********:9092 --topic 主題名 --from-beginning
問(wèn)題得到解決
我是這個(gè)原因，可以從報(bào)錯(cuò)信息中得知解析地址中的broker失敗了修改為宿主機(jī)IP得到解決
WARN [Consumer clientId=consumer-console-consumer-21595-1, groupId=console-consumer-21595] Connection to node -1 (localhost/127.0.0.1:9092) could not be established. Broker may not be available. (org.apache.kafka.clients.NetworkClient)
使用Kafka的kafka-console-consumer.sh不能消費(fèi)消息
使用Ambari搭建的kafka集群，在使用kafka-console-producer.sh的時(shí)候，指定--broker-list的值需要從server.properties中查看listeners=PLAINTEXT://的值。
同理，使用kafka-console-consumer.sh的時(shí)候，指定--bootstrap-server也需要從server.properties中查看listeners=PLAINTEXT://的值。
所以，以上已經(jīng)是確保了配置沒(méi)有問(wèn)題的情況下，出現(xiàn)了kafka使用kafka-console-consumer.sh沒(méi)有消費(fèi)消息。
問(wèn)題
使用kafka-console-consumer.sh沒(méi)有消費(fèi)消息
解決
（1）在無(wú)意中查看了kafka的server.log日志，發(fā)現(xiàn)一直在報(bào)如下錯(cuò)誤
ERROR [KafkaApi-1001] Number of alive brokers '2' does not meet the required replication factor '3' for the offsets topic (configured via 'offsets.topic.replication.factor'). This error can be ignored if the cluster is starting up and not all brokers are up yet. (kafka.server.KafkaApis)
（2）分析了下局面意思，大概就是broker的數(shù)量為2，但是server.properties配置的offsets.topic.replication.factor的值為3。
看到這里我大概有兩個(gè)解決方案
一、添加broker的數(shù)目
二、修改server.properties中offsets.topic.replication.factor的值，改成2【Ambari中該值在kafka-broker中修改】
總結(jié)
以上為個(gè)人經(jīng)驗(yàn)，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。
相關(guān)文章
Jenkins如何實(shí)現(xiàn)自動(dòng)打包部署linux
這篇文章主要介紹了Jenkins如何實(shí)現(xiàn)自動(dòng)打包部署linux,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-11-11
Java實(shí)現(xiàn)數(shù)組轉(zhuǎn)字符串及字符串轉(zhuǎn)數(shù)組的方法分析
這篇文章主要介紹了Java實(shí)現(xiàn)數(shù)組轉(zhuǎn)字符串及字符串轉(zhuǎn)數(shù)組的方法,結(jié)合實(shí)例形式分析了Java字符串及數(shù)組相關(guān)的分割、遍歷、追加等操作技巧,需要的朋友可以參考下2018-06-06
這篇文章主要介紹了Java中的Excel框架使用詳解,Java解析、生成Excel比較有名的框架有Apache poi、jxl,但他們都存在一個(gè)嚴(yán)重的問(wèn)題就是非常的耗內(nèi)存,poi有一套SAX模式的API可以一定程度的解決一些內(nèi)存溢出的問(wèn)題,需要的朋友可以參考下2023-11-11
配置pom.xml用maven打包java工程的方法(推薦)
下面小編就為大家?guī)?lái)一篇配置pom.xml用maven打包java工程的方法(推薦)。小編覺(jué)得挺不錯(cuò)的， 現(xiàn)在就分享給大家，也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧2016-06-06
Java詳解entity轉(zhuǎn)換到vo過(guò)程
這篇文章將用實(shí)例來(lái)和大家介紹一下entity轉(zhuǎn)換到vo的方法過(guò)程。文中的示例代碼講解詳細(xì)，對(duì)我們學(xué)習(xí)Java有一定的幫助，需要的可以參考一下2022-06-06
這篇文章主要介紹了淺談Java中的private方法是否可以被代理,在?Java?8之前,接口可以有常量變量和抽象方法,我們不能在接口中提供方法實(shí)現(xiàn),如果我們要提供抽象方法和非抽象方法(方法與實(shí)現(xiàn))的組合,那么我們就得使用抽象類,需要的朋友可以參考下2023-12-12
這篇文章主要介紹了spring boot中nativeQuery的作用,本文給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2021-07-07
Spring session實(shí)現(xiàn)共享單點(diǎn)登錄案例過(guò)程解析
這篇文章主要介紹了Spring session實(shí)現(xiàn)共享單點(diǎn)登錄案例過(guò)程解析,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-07-07
MybatisPlus 插入或更新數(shù)據(jù)時(shí)自動(dòng)填充更新數(shù)據(jù)解決方案
本文主要介紹了MybatisPlus 插入或更新數(shù)據(jù)時(shí)自動(dòng)填充更新數(shù)據(jù)解決方案，文中通過(guò)示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2021-09-09
springboot+mybaties項(xiàng)目中掃描不到@mapper注解的解決方法
本文主要介紹了springboot+mybaties項(xiàng)目中掃描不到@mapper注解的解決方法,該報(bào)錯(cuò)表明掃描不到Mapper層,具有一定的參考價(jià)值,感興趣的可以了解一下2024-05-05