第二次开启日志聚合功能,并且执行stop-all.sh, start-all.sh,启动hadoop后,运行wordcount程序报错如下,麻烦老师解答下。

第二次开启日志聚合功能,并且执行stop-all.sh, start-all.sh,启动hadoop后,运行wordcount程序报错如下,麻烦老师解答下。

# 具体遇到的问题
​ client.RMProxy: Connecting to ResourceManager at bigdata01/172.18.54.54:8032

第一次执行hadoop jar运行wordcount程序成功,并且hdfs /out下有输出文件,第二次开启日志聚合功能,并且执行stop-all.sh, start-all.sh,启动hadoop后,运行程序报错如下,麻烦老师解答下。

# 报错信息的截图
http://img1.sycdn.imooc.com//climg/5fb41f8b0941e98627840218.jpg

# 相关课程内容截图
http://img1.sycdn.imooc.com//climg/5fb41ffd09c9224309500150.jpg

# 尝试过的解决思路和结果

yarn node -list
http://img1.sycdn.imooc.com//climg/5fb42012091e462a18780264.jpg

# 粘贴全部相关代码,切记添加代码注释(请勿截图)

在这里输入代码,可通过选择【代码语言】突出显示

正在回答

登陆购买课程后可参与讨论,去登陆

1回答

这里提示的是info级别的日志,你查询的任务状态也是running,属于运行状态
你这样排查一下问题,确认集群中的进程是否都在,以及在8088界面中看一下任务的执行状态,如果状态提示失败的话,通过界面查看一下日志,把错误日志发出来

  • Melenydi 提问者 #1
    确认集群中的进程是否都在 [root@bigdata01 ~]# jps 17845 NodeManager 25068 Jps 17708 ResourceManager 17180 DataNode 17053 NameNode 17423 SecondaryNameNode 以及在8088界面中看一下任务的执行状态,如果状态提示失败的话,通过界面查看一下日志,把错误日志发出来 ——提示Log Aggregation Status: TIME_OUT,我理解没有生成日志 User: dr.who Name: get-shell Application Type: YARN Application Tags: Application Priority: -1 (Higher Integer value indicates higher priority) YarnApplicationState: FAILED Queue: default FinalStatus Reported by AM: FAILED Started: Wed Nov 18 10:09:22 +0800 2020 Launched: Wed Nov 18 10:09:23 +0800 2020 Finished: Wed Nov 18 10:13:40 +0800 2020 Elapsed: 4mins, 18sec Tracking URL: History Log Aggregation Status: TIME_OUT Application Timeout (Remaining Time): Unlimited Diagnostics: Application application_1605639596032_0002 failed 2 times due to AM Container for appattempt_1605639596032_0002_000002 exited with exitCode: 0 Failing this attempt.Diagnostics: For more detailed output, check the application tracking page: http://bigdata01:8088/cluster/app/application_1605639596032_0002 Then click on links to logs of each attempt. . Failing the application. Unmanaged Application: false Application Node Label expression: <DEFAULT_PARTITION>
    2020-11-18 13:10:02
  • Melenydi 提问者 #2
    问答区太不友好了,不能截图,自动调整成一行,我晚上发到讨论组咨询老师您。
    2020-11-18 13:11:26
  • 徐老师 回复 提问者 Melenydi #3
    好的,晚上通过qq发给我,不好排查的话也方便远程排查问题
    2020-11-18 13:24:23
问题已解决,确定采纳
还有疑问,暂不采纳

恭喜解决一个难题,获得1积分~

来为老师/同学的回答评分吧

0 星
请稍等 ...
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号

在线咨询

领取优惠

免费试听

领取大纲

扫描二维码,添加
你的专属老师