hadoop3.1.1 ha问题(Webapps failed to start,Error starting xhdlq )项目场景:
配置微群集角色
IP地址nn dn rm nm jn zk DFSZKFC
192.168.0.200 Y Y Y Y
192.168.0.202 Y Y Y Y
192.168.0.203 Y Y Y Y
192.168.0.204 Y Y Y Y
192.168.0.205 Y Y Y Y
nn namenode
dn datanode
RM资源主程序
nm nodemaster
jn journalnode
zk zookeeper
DFSZKFC DFSZKFailoverController
报告错误的场景:
完成上述角色的配置后,运行hadoop自带示例,并获得PI值
hadoopjarhadoop-MapReduce-examples-3.1.1.jar pi 21
现象: 1、任务提交后暂不进行映射。 截图如下。
2、再过一会儿就开始报告错误。 截图:
3、查看这个容器id执行日志,如下所示。
2021-01-160:41336000,086 info [ main ] org.Apache.Hadoop.http.http服务器2: addedglobalfilter‘safety’
2021-01-160:41336000,206 error [ main ] org.Apache.Hadoop.MapReduce.v2.app.client.Mr client 3358 www.clired
java.lang.NullPointerException
atorg.Apache.Hadoop.util.string utils.join (string utils.Java :941 ) )。
atorg.Apache.Hadoop.yarn.server.webproxy.am filter.amfilterinitializer.init filter (amfilterinitializer.Java 333 )
atorg.Apache.Hadoop.http.http server2. initialize web server (http server2. Java 3360587 ) )。
(atorg.Apache.Hadoop.http.http server2. (http server2. Java :537 ) ) ) ) ) ) ) ) )。
atorg.Apache.Hadoop.http.http server2. ((http server2. Java :117 ) ) ) ) ) )。
2021-01-160:41336000,409 info [ main ] org.Apache.Hadoop.MapReduce.v2.app.RM.rmcontaineralllocator 33666
java.lang.NullPointerException
atorg.Apache.Hadoop.MapReduce.v2.app.client.Mr客户端服务. get http port (Mr客户端服务. Java 3360177 )。
atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.register (RM communicator.Java 3360159 )。
atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.service start (RM communicator.Java 3360122 )。
atorg.Apache.Hadoop.MapReduce.v2.app.RM.rmcontainerallocator.service start (rmcontainerallocator )。
2021-01-160:41336000,556 info [ main ] org.Apache.Hadoop.service.abstractservice 3360 service 3358 www.Sina
org.Apache.Hadoop.yarn.exceptions.yarnruntimeexception : Java.lang.nullpointerexception
atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.register (RM communicator.Java 3360178 ) )。
atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.service start (RM communicator.Java 3360122 )。
atorg.Apache.Hadoop.MapReduce.v2.app.RM.rmcontainerallocator.services ta
2021-01-160:41336000,557 info [ main ] org.Apache.Hadoop.service.abstractservice 3360 service org.Apache.abstse
org.Apache.Hadoop.yarn.exceptions.yarnruntimeexception : Java.lang.nullpointerexception
atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.register (RM communicator.Java 3360178 ) )。
atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.service start (RM communicator.Java 3360122 )。
atorg.Apache.Hadoop.MapReduce.v2.app.RM.rmcontainerallocator.service start (rmcontaineralloc
2021-01-160:41336002,047 error [ main ] org.Apache.Hadoop.MapReduce.v2.app.xh dlq 3603358 www.Sina .
org.Apache.Hadoop.yarn.exceptions.yarnruntimeexception : Java.lang.nullpointerexception
atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.register (RM communicator.Java 3360178 ) )。
atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.service start (RM communicator.Java 3360122 )。
atorg.Apache.Hadoop.MapReduce.v2.app.RM.rmcontainerallocator.service start (rmcontainerallocator.Java :288
atorg.Apache.Hadoop.service.abstractservice.start (abstractservice.Java :194 )。
atorg.Apache.Hadoop.MapReduce.v2.app.xh dlq $ containerallocatorrouter
具体是什么问题,请协助。 谢谢你。