用kafka-sparkstreaming 怎么避免小文件
1个回答
展开全部
前面应该还有个数据生产者，比如flume.flume负责生产数据，发送至kafka。sparkstreaming作为消费者，实时的从kafka中获取数据进行计算。计算结果保存至redis，供实时推荐使用。flume+kafka+spark+redis是实时数据收集与计算的一套经典架构
已赞过
已踩过<
评论
收起
你对这个回答的评价是？
推荐律师服务：
若未解决您的问题，请您详细描述您的问题，通过百度律临进行免费专业咨询
