内容简介:这是坚持技术写作计划(含翻译)的第27篇,定个小目标999,每周最少2篇。今天安装cdh时遇到hdfs启动失败问题,解决起来倒是不麻烦,简单记录下。原因:执行hdfs namenode -format后,current目录会删除并重新生成,其中VERSION文件中的clusterID也会随之变化,而datanode的VERSION文件中的clusterID保持不变,造成两个clusterID不一致。
这是坚持技术写作计划(含翻译)的第27篇,定个小目标999,每周最少2篇。
今天安装cdh时遇到hdfs启动失败问题,解决起来倒是不麻烦,简单记录下。
关键信息 java.io.IOException: Incompatible clusterIDs in /dfs/dn: namenode clusterID = cluster74; datanode clusterID = cluster14
关键信息,namenode的 clusterID和datanode的不一致。
原因:执行hdfs namenode -format后,current目录会删除并重新生成,其中VERSION文件中的clusterID也会随之变化,而datanode的VERSION文件中的clusterID保持不变,造成两个clusterID不一致。
方案:
- 如果是新建的集群,则直接主机目录
/dfs/dn(cdh->hdfs->配置->dfs.datanode.data.dir)下的current目录下的文件删除rm -rf /dfs/dn/current/* - 如果集群内有数据,则只改 /dfs/dn/current/VERSION 中的
clusterID=clusterXXXX为正确的namenode的clusterID
重启datanode即可
以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网
本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。
Python科学计算(第2版)
张若愚 / 清华大学出版社 / 2016-4-29 / 118
本书介绍如何用 Python 开发科学计算的应用程序,除了介绍数值计算之外,还着重介绍了如何制作交互式二维、三维图像,如何设计精巧的程序界面,如何与 C 语言编写的高速计算程序结合,如何编写声音、图像处理算法等内容。本书采用 IPython notebook 编写,所有的程序均能在本书提供的运行环境中正常运行,书中所印刷的图表以及程序输出为均为自动运行的结果,保证了书中所有程序的正确性以及可读性。......一起来看看 《Python科学计算(第2版)》 这本书的介绍吧!