hadoop 笔记

hadoop博客地址：

Shuffle，奇迹发生的地方，mapreduce的核心：

2、hadoop执行hdfs命令报错： ipc.Client: Retrying connect to server:

原因是：hadoop默认配置是把一些tmp文件放在/tmp目录下，重启系统后，tmp目录下的东西被清除，所以报错

解决方法：在conf/core-site.xml（0.19.2版本的为conf/hadoop-site.xml）中增加以下内容

<property>

<name>hadoop.tmp.dir</name>

<value>/var/log/hadoop/tmp</value>

<description>Abaseforothertemporarydirectories</description>

</property>

3、

通过 http://master node的主机名或IP：50030 可以链接到JobTracker

通过 http://master node的主机名或IP：50070 可以链接到NameNoe