请稍等 ...

flume数据源

老师，flume数据源spoolDir可以监控hdfs上的文件收集日志吗？

慕先生4044781 2018-11-28 15:04:31

源自：15-2 -流处理语义详解

1306

收起

提交取消

2回答

Michael_PK 2018-11-28 15:25:06

都在HDFS上了，你是想采集到哪去？

0 回复有任何疑惑可以回复我~

收起回答

提问者慕先生4044781 2018-11-28 17:48:16

应用日志直接写到hdfs，从hdfs采集到kafka可以吗？

0 回复有任何疑惑可以回复我~

收起回答

Michael_PK #1

HDFS到kafka这是什么场景？实时也不对，实时不可能先到HDFS，离线么，从HDFS处理完结果如果到kafka，那直接API操作就行了

回复有任何疑惑可以回复我~ 2018-11-28 17:59:52

提问者慕先生4044781 #2
```
好的谢谢老师
```
回复有任何疑惑可以回复我~ 2018-11-28 18:03:24

相似问题

flume-ng version 报错

Flume版本不匹配

flume配置时报错，找不到主类

请教老师用Flume采集线上nginx的日志那Flume是不是也要安装到同nginx的服务器上？

bin/flume-ng启动后没有反应

登录后可查看更多问答，登录/注册

Spark Streaming实时流处理项目实战

参与学习 1404 人
解答问题 571 个

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

了解课程

本课精华内容

问答

读英语的时候能不能不要propertie撕，topic撕

2.1k 89

cannot assign requested address

1.5k 14

kafka生产者消息发不出去

2.7k 13

kafka.serializer.StringDecoder死活导不进来

2.2k 12

spark streaming运行较长时间后报错kafka.common.OffsetOutOfRangeException

2.8k 12

查看更多本课问答

微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号

flume数据源

正在回答

2回答

相似问题