请稍等 ...

flume数据源

老师，flume数据源spoolDir可以监控hdfs上的文件收集日志吗？

慕先生4044781 2018-11-28 15:04:31

源自：15-2 -流处理语义详解

1105

收起

提交取消

2回答

Michael_PK 2018-11-28 15:25:06

都在HDFS上了，你是想采集到哪去？

0 回复有任何疑惑可以回复我~

收起回答

提问者慕先生4044781 2018-11-28 17:48:16

应用日志直接写到hdfs，从hdfs采集到kafka可以吗？

0 回复有任何疑惑可以回复我~

收起回答

Michael_PK #1

HDFS到kafka这是什么场景？实时也不对，实时不可能先到HDFS，离线么，从HDFS处理完结果如果到kafka，那直接API操作就行了

回复有任何疑惑可以回复我~ 2018-11-28 17:59:52

提问者慕先生4044781 #2
```
好的谢谢老师
```
回复有任何疑惑可以回复我~ 2018-11-28 18:03:24

相似问题

flume-ng version 报错

flume配置时报错，找不到主类

Flume版本不匹配

bin/flume-ng启动后没有反应

Flume写入Hive

登录后可查看更多问答，登录/注册

Spark Streaming实时流处理项目实战

参与学习 1404 人
解答问题 571 个

Flume+Kafka+Spark Streaming 构建通用实时流处理平台

了解课程

本课精华内容

问答

读英语的时候能不能不要propertie撕，topic撕

1.7k 89

cannot assign requested address

1.1k 14

kafka生产者消息发不出去

2.3k 13

kafka.serializer.StringDecoder死活导不进来

1.7k 12

spark streaming运行较长时间后报错kafka.common.OffsetOutOfRangeException

2.4k 12

查看更多本课问答

意见反馈帮助中心 APP下载

官方微信

flume数据源

正在回答

2回答

相似问题