配置完moreType.conf后，添加了MoreType.txt日志，启动flume后报错

weixin_慕娘5221518 2020-11-25

源自：Flume从0到高手一站式养成记 3-1 Flume高级组件之Source Interceptors

21

收起

4回答

徐老师回答被采纳获得+3积分 2020-11-25 17:23:09

按照这个操作了吗

1：在bigdata04上执行下面命令，看看能不能执行成功 hdfs dfs -ls hdfs://192.168.182.100:9000/

2：现在bigdata04机器的flume任务、无法用cirl+c停止可以克隆一个bigdata04的会话窗口，执行jps，找到flume的进程pid，使用kill强制杀掉即可

现在怎么样了？

提问者 weixin_慕娘5221518 2020-11-25 17:57:10

执行 hdfs dfs -ls hdfs://192.168.182.100:9000/ 显示如上

徐老师 #1

这说明在bigdata04上面连不上hdfs 你的bigdata01节点的ip是192.168.182.100吗？

2020-11-25 18:01:00
徐老师 #2

你前面使用flume报错，说的就是在bigdata04上无法向192.168.182.100这个节点的hdfs中写入数据

2020-11-25 18:01:53
提问者 weixin_慕娘5221518 回复徐老师 #3

改了！改完就就可以了

2020-11-25 18:03:00

提问者 weixin_慕娘5221518 2020-11-25 16:53:29

上面是日志文件，下面是配置文件

徐老师 2020-11-25 16:44:35

错误提示的是连不上hdfs，应该是Hadoop集群有问题，或者是忘记启动了

确认一下HDFS是否能正常操作

提问者 weixin_慕娘5221518 #1

又重启了下hadoop集群，hdfs能正常操作。运行flume依旧报错

2020-11-25 16:48:22
提问者 weixin_慕娘5221518 #2

我的日志文件是直接在bigdata04机器上编辑的，没有克隆bigdata04机器再去添加、不知道是否有影响

2020-11-25 16:49:40
提问者 weixin_慕娘5221518 #3

现在bigdata04机器的flume任务、无法用cirl+c停止

2020-11-25 16:50:59

点开查看后面2条评论

相似问题

为什么添加了logback相关的依赖包就直接能打印出日志啊

关于flume采集文件内容和上传日志脚本之间的区别

关于undo日志

日志文件无任何输出

日志

登录后可查看更多问答，登录/注册

大数据工程师 2024 版

参与学习 1151 人
提交作业 5960 份
解答问题 1144 个

不用Java初级内容充数！不用与大数据岗位无关内容占课时！我们做的就是“精华版”大数据课程

本课精华内容

问答作业

老师，每个比较大的文件都会分割成块保存在DataNode中，那就说一个datanode坏了导致整个文件不可用，这样不就减低了可靠性吗？

54 2

对多个executor并行处理，对数据进行去重，这样会不会有重复数据

31 1

数据倾斜问题

78 5

并行度调优疑问

29 9

yum install -y ntpdate执行报错

17 20

查看更多本课问答

请稍等 ...

意见反馈帮助中心 APP下载