hadoop常见错误以及处理方法详解

发布时间:2022-04-30 发布网站:脚本宝典
脚本宝典收集整理的这篇文章主要介绍了hadoop常见错误以及处理方法详解脚本宝典觉得挺不错的,现在分享给大家,也给大家做个参考。

atanode-master.LOG 中有如下错误

ERROR org.apache.hadoop.hDFs.server.datanode.Datanode: java.io.IOException: Incompatible namespaceiDs in
导致datanode启动不了。
原因:每次namenode format会重新创建一个namenodeId,而dfs.data.dir参数配置的目录中包含的是上次format创建的id,和dfs.name.dir参数配置的目录中的id不一致。namenode format清空了namenode下的数据,但是没有清空datanode下的数据,导致启动时失败,所要做的就是每次fotmat前,清空dfs.data.dir参数配置的目录.
格式化hdfs的命令
代码如下:

脚本宝典总结

以上是脚本宝典为你收集整理的hadoop常见错误以及处理方法详解全部内容,希望文章能够帮你解决hadoop常见错误以及处理方法详解所遇到的问题。

如果觉得脚本宝典网站内容还不错,欢迎将脚本宝典推荐好友。

本图文内容来源于网友网络收集整理提供,作为学习参考使用,版权属于原作者。
如您有任何意见或建议可联系处理。小编QQ:384754419,请注明来意。