Mapreduce运行异常分析

最新推荐文章于 2024-05-28 01:26:39 发布

原创最新推荐文章于 2024-05-28 01:26:39 发布 · 1.2k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#大数据 #java #hadoop #分布式

Java 专栏收录该内容

22 篇文章

订阅专栏

博客记录了hadoop jar运行异常的解决过程。终端日志未显示详细错误信息，需查看用户日志。发现是访问节点无法解析域名hadoop01，原因是该记录未写入分布式集群，将其添加到hosts中问题得以解决。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

hadoop jar…运行异常，终端日志如下

 Job job_1609054990280_0001 failed with state FAILED due to: Application application_1609054990280_0001 failed 2 times due to AM Container for appattempt_1609054990280_0001_000002 exited with  exitCode: 1
Failing this attempt.Diagnostics: [2020-12-27 15:44:57.935]Exception from container-launch.
Container id: container_1609054990280_0001_02_000001
Exit code: 1

没有显示去详细错误信息，需要查看用户日志http://hadoop01:8042/logs/userlogs/,hadoop01为我的hadoop客户端机器中的一条hosts记录 172.17.0.2 hadoop01，并应用到了客户端的配置文件中（可是没有写到分布式集群中）。
在这里插入图片描述

从终端日志中看出application ID为application_1609054990280_0001，进入第一个文件夹，继续进入查看syslog。
在这里插入图片描述
看出详细异常信息：

得知是访问的节点无法解析域名hadoop01，添加到hosts中就好了。
——————————————————————————————————————
记录一下解决问题的过程，下次好知道去怎么分析问题。