1、运行后遇到了hdfs专用的9000端口没有启动
Directory /tmp/hadoop-javoft/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible.这里的目录既然是在tmp下面的,回忆一下,tmp目录下的文件是临时文件会被定期删除的,貌似bug已经露出水面。那就重启计算机试试是不是因为这,重启之前检查一下tmp目录下面确定几个format namenode之后应该有的目录都有的,重启之后,发现全部被删掉。在执行一次 start-dfs.sh,看到tmp目录下面建了一些目录,但是dfs/name目录仍然不存在,在start-dfs.sh时候建了一部分目录和文件。而dfs/name需要在hadoop namenode -format时建立。问题清楚了。
解决方案就很简单,这些目录的位置都是根据hadoop.tmp.dir的位置确定的,所以只需要在conf/core-site.xml覆盖hadoop.tmp.dir的默认值即可:
...
<
property
>
<
name
>hadoop.tmp.dir</
name
>
<
value
>/home/javoft/Documents/hadoop/hadoop-${user.name}</
value
>
<
description
>A base for other temporary directories.</
description
>
</
property
>
...
如此问题解决。。。
相关推荐
Hadoop 学习总结
Hadoop学习总结,内容包括: 1. HDFS简洁 2. HDFS读写过程解析 3. MapReduce入门 4. MapReduce过程解析 5. Hadoop运行痕迹 6. MapReduce源码分析总结
Eclipse中编译运行Hadoop-0.20.1源码, 便于阅读源代码,
hadoop-cluster-docker, 在 Docker 容器中运行 Hadoop 在 Docker 容器内运行Hadoop集群博客:在 Docker 更新中运行Hadoop集群。博客:基于Docker搭建Hadoop集群之升级版 3节点Hadoop集群 1.拉 Docker 图像sudo do
python成功运行hadoop
hadoop源码阅读总结
ubuntu上面运行hadoop自带的wordcount实例
myeclipse运行hadoop文件,通过他能熟练掌握
Hadoop平台搭建总结
这是帮助想在eclipse上运行hadoop的插件,可以保证在eclipse上启动hadoop
hadoop基本知识总结
Hadoop 简介 Hadoop 优点 Hadoop基本架构
这是本人根据《Hadoop权威指南》和《Hadoop实战》这两本书进行总结,对Hadoop中的MapReduce机制和HDFS数据流程进行总结,并对Hadoop的发展历程进行总结,是对Hadoop的高度总结。
hadoop培训总结,包括课程背景,课程大纲,培训目标,学习总结
运行Hadoop的数据中心流量特性,杨贺,王洪波,随着越来越多的公司和机构开始使用Hadoop运行他们的业务,关于Hadoop的研究也越来越多的受到人们的关注。但是关于运行Hadoop的数据中心
重点描述hadoop2.0的大数据处理环境搭建过程
Hadoop中单词统计案例运行的代码
hadoop学习总结(面试必备) 里面有hadoop的各种知识点
Hadoop学习总结之五:Hadoop的运行痕迹