pip install kafka-python
import gzip
from kafka import KafkaConsumer
from kafka import TopicPartition
consumer = KafkaConsumer(bootstrap_servers='10.30.10.15:9092')
partition = TopicPartition('dc-diagnostic-report', 0)
start = 8833
end = 8835
consumer.assign([partition])
consumer.seek(partition, start)
i=start
for msg in consumer:
if msg.offset > end:
break
else:
print msg
try:
outF = file( '/data/app/tar/' + str(i) + ".gz", 'wb')
outF.write(msg.value)
outF.close()
i+=1
print i
except Exception,e:
print e
最后編輯于 ：
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成，瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點(diǎn)，簡(jiǎn)書系信息發(fā)布平臺(tái)，僅提供信息存儲(chǔ)服務(wù)。
