描述:
Hadoop执行job的时候抛出SafeModeException,详情如下:
org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeModeException): Cannot delete /benchmarks/TestDFSIO. Name node is in safe mode. Resources are low on NN. Please add or free up more resources then turn off safe mode manually. NOTE: If you turn off safe mode before adding resources, the NN will immediately return to safe mode. Use "hdfs dfsadmin -safemode leave" to turn safe mode off.
原因:
Hadoop目前处于safe状态,产生的原因与dfs.safemode.threshold.pct,有关系,默认为99,9%,为了系统的安全考虑那么系统自动进入安全状态,从而任何修改操作将不能进行,说的直白点就是空间满了
解决:
1.强制离开安全模式:
hdfs dfsadmin -safemode leave
2.增加磁盘然后执行wait命令:
hdfs dfsadmin -safemode wait
1和2是两种方案
通过dfsadmin -safemode value 来操作安全模式,参数value的说明如下:
enter - 进入安全模式 leave - 强制NameNode离开安全模式 get - 返回安全模式是否开启的信息 wait - 等待,一直到安全模式结束。
相关推荐
Hadoop使用常见问题以及解决方法,简单实用
安装hadoop的时候或者使用的时候,会出现hadoop常见问题及解决方法
hadoop使用distcp问题解决 然后用distcp从1.0.3的集群拷数据到2.0.1的集群中。 遇到问题处理
Hadoop使用常见问题以及解决方法.doc Hadoop使用常见问题以及解决方法.doc
在网上搜集的以及本人自己总结的hadoop集群常见问题及解决办法,融合了网上常常搜到的一些文档以及个人自己的经验。
hadoop安装时,会遇到不同问题,这里只是列举我自己遇到的问题
windows下hadoop2.7.3环境问题的解决,亲测win10、win7皆可使用
[Wrox] Hadoop 专业解决方案 (英文版) [Wrox] Professional Hadoop Solutions (E-Book) ☆ 图书概要:☆ If you're ready to make the most out of massively scalable analytics, you need to know how to take ...
在windows环境下开发hadoop时,需要配置HADOOP_HOME环境变量,变量值D:\hadoop-common-2.7.3-bin-master,并在Path...解决方案:下载本资源解压将hadoop.dll和winutils.exe文件复制到hadoop2.7.3的bin目录下即可解决。
文档主要用于对hadoop搭建及使用过程出现的问题的解决
Hadoop大数据平台安全问题和解决方案的综述
Hadoop大数据平台安全问题和解决方案的综述,可以从这里学习到处理问题的思路。
Logstash6整合Hadoop-报错与解决方案.docx
本书结合丰富的案例来展示如何用hadoop解决特殊问题,它将帮助您: ·使用hadoop分布式文件系统(hdfs)来存储海量数据集, 通过mapreduce对这些数据集运行分布式计算 ·熟悉hadoop的数据和ilo构件,用于压缩...
Hadoop MapReduce作业卡死问题的解决方法.docx
(这是Hadoop的基础) 2.必须ssh无密码登录 3./etc/host 里配置 master和slaves 4.修改/etc/hostname 主机名 5、/etc/profile的java和Hadoop配置路径 6.hadoop namenode format 7./hadoop/etc/slaves这个文件里必须...
NULL 博文链接:https://201201314056.iteye.com/blog/2193117
Hadoop高级编程- 构建与实现大数据解决方案.Hadoop高级编程- 构建与实现大数据解决方案
资源中具体对Hadoop HA平台搭建过程中出现的问题给出了相应的解决办法,图文结合,适合新手学习来用,如果遇到其他,欢迎交流学习
HADOOP第一代文件系统的问题和解决方案,和同软件提出自已的解决方案