windows环境搭建Hadoop过程中的一些问题及解决办法

panjianm

先说明两点：
1.搭建的基本过程参见Hadoopor论坛的Hadoop开发者杂志第一期，很靠谱。
2.本文以下内容全部经过个人验证。

搭建环境过程中出现的问题：
a.安装cygwin时源URL的选择
   参照Hadoop开发者论坛，如下：



   但实际上该源并不能使用。
   推荐：在URL里输入：http://mirrors.163.com/cygwin/，点击Add按钮，然后选中 http://mirrors.163.com/cygwin 进行安装。

b.JAVA_HOME问题
   在hadoop-env.sh 中设定JDK 的安装目录，例如：
   export JAVA_HOME=/cygdrive/d/java/jdk1.6.0_13，注意去掉该行前边的#，看似微小的问题，很多人在这里浪费了时间。另外，不建议安装JDK到Program Files文件下，可能导致奇怪问题。

c.经典的INFO ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 0 time(s)问题
   现在Hadoopor论坛好多人还在纠结，当时自己也花费了不少精力解决这个问题，这里做一下解答，感谢论坛里曾经帮助自己的前辈。
   原因：hadoop默认配置是把一些tmp文件放在/tmp目录下，重启后，tmp目录下的东西被删除，所以报错。
   解决方法：在conf/core-site.xml中修改hadoop.tmp.dir属性的值，即换一个路径。例如，我修改为：
   <property>
   <name>hadoop.tmp.dir</name>
   <value>/home/${user.name}/cloudera-data</value>
   <description>A base for other temporary directories</description>
   </property>
   然后格式化namenode，重启hadoop即可。

截几张图片：
a.启动hadoop



b.用jps命令查看



c.输入./hadoop fs -ls /



by the way，我的hadoop版本是0.20.2