通過pykafka接收Kafka消息隊列的方法
更新時間:2018年12月27日 11:29:45 作者:BabyFish13
今天小編就為大家分享一篇通過pykafka接收Kafka消息隊列的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
沒有Kafka環(huán)境,所以也沒有進行驗證。感覺今后應該能用到,所以借抄在此,備查。
pykafka使用示例,自動消費最新消息,不重復消費:
# -* coding:utf8 *- from pykafka import KafkaClient host = '192.168.200.38' client = KafkaClient(hosts="%s:9092" % host) print client.topics # 生產者 # topicdocu = client.topics['task_pull'] # producer = topicdocu.get_producer() # for i in range(4): # print i # producer.produce('test message ' + str(i ** 2)) # producer.stop() # 消費者 topic = client.topics['task_push'] consumer = topic.get_simple_consumer(consumer_group='test', auto_commit_enable=True, consumer_id='test') for message in consumer: if message is not None: print message.offset, message.value
以上這篇通過pykafka接收Kafka消息隊列的方法就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持腳本之家。
相關文章
Python實現讀取目錄所有文件的文件名并保存到txt文件代碼
這篇文章主要介紹了Python實現讀取目錄所有文件的文件名并保存到txt文件代碼,本文分別使用os.listdir和os.walk實現給出兩段實現代碼,需要的朋友可以參考下2014-11-11如何對Python編譯PyInstaller打包生成的exe文件進行反編譯生成pyc、py源代碼文件
很多開發(fā)者沒有發(fā)布源程序代碼,而是將代碼封裝為exe可執(zhí)行文件,這樣不僅更有利于程序傳播,下面這篇文章主要介紹了如何對Python編譯PyInstaller打包生成的exe文件進行反編譯生成pyc、py源代碼文件的相關資料,需要的朋友可以參考下2023-01-01