首页 > 编程知识 正文

格式化hadoop找不到命令,hadoop运行wordcount卡住了

时间:2023-05-05 22:55:34 阅读:62061 作者:4035

hadoop3.1.1 ha问题(Webapps failed to start,Error starting xhdlq )项目场景:

配置微群集角色

IP地址nn dn rm nm jn zk DFSZKFC

192.168.0.200 Y Y Y Y

192.168.0.202 Y Y Y Y

192.168.0.203 Y Y Y Y

192.168.0.204 Y Y Y Y

192.168.0.205 Y Y Y Y

nn namenode

dn datanode

RM资源主程序

nm nodemaster

jn journalnode

zk zookeeper

DFSZKFC DFSZKFailoverController

报告错误的场景:

完成上述角色的配置后,运行hadoop自带示例,并获得PI值

hadoopjarhadoop-MapReduce-examples-3.1.1.jar pi 21

现象: 1、任务提交后暂不进行映射。 截图如下。

2、再过一会儿就开始报告错误。 截图:

3、查看这个容器id执行日志,如下所示。

2021-01-160:41336000,086 info [ main ] org.Apache.Hadoop.http.http服务器2: addedglobalfilter‘safety’

2021-01-160:41336000,206 error [ main ] org.Apache.Hadoop.MapReduce.v2.app.client.Mr client 3358 www.clired

java.lang.NullPointerException

atorg.Apache.Hadoop.util.string utils.join (string utils.Java :941 ) )。

atorg.Apache.Hadoop.yarn.server.webproxy.am filter.amfilterinitializer.init filter (amfilterinitializer.Java 333 )

atorg.Apache.Hadoop.http.http server2. initialize web server (http server2. Java 3360587 ) )。

(atorg.Apache.Hadoop.http.http server2. (http server2. Java :537 ) ) ) ) ) ) ) ) )。

atorg.Apache.Hadoop.http.http server2. ((http server2. Java :117 ) ) ) ) ) )。

2021-01-160:41336000,409 info [ main ] org.Apache.Hadoop.MapReduce.v2.app.RM.rmcontaineralllocator 33666

java.lang.NullPointerException

atorg.Apache.Hadoop.MapReduce.v2.app.client.Mr客户端服务. get http port (Mr客户端服务. Java 3360177 )。

atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.register (RM communicator.Java 3360159 )。

atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.service start (RM communicator.Java 3360122 )。

atorg.Apache.Hadoop.MapReduce.v2.app.RM.rmcontainerallocator.service start (rmcontainerallocator )。

2021-01-160:41336000,556 info [ main ] org.Apache.Hadoop.service.abstractservice 3360 service 3358 www.Sina

org.Apache.Hadoop.yarn.exceptions.yarnruntimeexception : Java.lang.nullpointerexception

atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.register (RM communicator.Java 3360178 ) )。

atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.service start (RM communicator.Java 3360122 )。

atorg.Apache.Hadoop.MapReduce.v2.app.RM.rmcontainerallocator.services ta

2021-01-160:41336000,557 info [ main ] org.Apache.Hadoop.service.abstractservice 3360 service org.Apache.abstse

org.Apache.Hadoop.yarn.exceptions.yarnruntimeexception : Java.lang.nullpointerexception

atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.register (RM communicator.Java 3360178 ) )。

atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.service start (RM communicator.Java 3360122 )。

atorg.Apache.Hadoop.MapReduce.v2.app.RM.rmcontainerallocator.service start (rmcontaineralloc

2021-01-160:41336002,047 error [ main ] org.Apache.Hadoop.MapReduce.v2.app.xh dlq 3603358 www.Sina .

org.Apache.Hadoop.yarn.exceptions.yarnruntimeexception : Java.lang.nullpointerexception

atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.register (RM communicator.Java 3360178 ) )。

atorg.Apache.Hadoop.MapReduce.v2.app.RM.RM communicator.service start (RM communicator.Java 3360122 )。

atorg.Apache.Hadoop.MapReduce.v2.app.RM.rmcontainerallocator.service start (rmcontainerallocator.Java :288

atorg.Apache.Hadoop.service.abstractservice.start (abstractservice.Java :194 )。

atorg.Apache.Hadoop.MapReduce.v2.app.xh dlq $ containerallocatorrouter

具体是什么问题,请协助。 谢谢你。

版权声明:该文观点仅代表作者本人。处理文章:请发送邮件至 三1五14八八95#扣扣.com 举报,一经查实,本站将立刻删除。