Hadoop快速入门里头单机模式操作方法运行错误的解决办法
尝试了一下Hadoop,没想到按照教程来,第一个例子就报错了……
错误如下:
$ bin/hadoop jar hadoop-mapred-examples-0.21.0.jar grep input output 'dfs[a-z.]+'
Exception in thread "main" java.io.IOException: Error opening job jar: hadoop-mapred-examples-0.21.0.jar
at org.apache.hadoop.util.RunJar.main(RunJar.java:90)
Caused by: java.util.zip.ZipException: error in opening zip file
at java.util.zip.ZipFile.open(Native Method)
at java.util.zip.ZipFile.<init>(ZipFile.java:127)
at java.util.jar.JarFile.<init>(JarFile.java:135)
at java.util.jar.JarFile.<init>(JarFile.java:72)
at org.apache.hadoop.util.RunJar.main(RunJar.java:88)
仔细一看, java.util.zip.ZipException是文件找不到的异常。主要原因是hadoop-mapred-examples-0.21.0.jar 无法定位。所以叻,办法很简单
1)把环境变量先配了(如果是在hadoop的home目录下操作的话,大可不必配,大家可以去尝试)
$vim /etc/profile
添加这两行
export HADOOP_HOME=/home/linrui/programfiles/dev/hadoop-0.20.203.0
export HADOOP_CONF_DIR=$HADOOP_HOME/conf
2)去hadoop_home目录下看看这个jar包(这个包存在的,只不过名字可能不太一样),然后把名字写准就好了。
然后运行~一切OK!