首页 > 其他 > 详细

今天的工作是把数据的采集和存储打通

时间:2021-06-06 00:33:42      阅读:34      评论:0      收藏:0      [点我收藏+]

把数据的采集和存储打通:

logstash->kafka->flink->hbase

 

直接用django中的数据对接到kafka中,直接对接到kafka中,遇到了各种各样的委托

 

更新kafka遇到的第一个比较大的问题

.KafkaTimeoutError: KafkaTimeoutError: Failed to update metadata after 1.0 secs.

直接用kafka自带的工具操作没问题,操作工具没问题

用这个示例是可以解决的,

https://towardsdatascience.com/kafka-python-explained-in-10-lines-of-code-800e3e07dad1

 

今天的工作是把数据的采集和存储打通

原文:https://www.cnblogs.com/honpey/p/14854239.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!