hadoop hdfs 基本操作

我用的是hadoop 2.8.3 在 Centos 7 上面,所以下面的一些命令也是针对这个版本的。 因为不同的版本之间命令有可能是不一样的。

安装好hadoop 以后,就是看下怎么样往上面放文件了。目前主要是两种方式,一种是shell,也就是用hdfs 的命令方式,另外就是Java。

Shell 方式。

1.首先要cd 到hadoop 的bin 目录下,下面有hdfs 的命令。然后第一步是创建文件夹。下面会创建一个 kentest 文件夹 和 testdata001 子文件夹。


hadoop hdfs 基本操作
 

2. 然后在本地创建一个文件 test123.txt。 注意我是在 /root 下面创建的,不然下面的命令会报错。下面是上传本地的文件到hdfs 中去的具体命令。


hadoop hdfs 基本操作
 

3. 上传完了,可以查看hdfs 文件系统里刚刚上传的文件内容一确保是不是已经成功。


hadoop hdfs 基本操作

同时也可以在hadoop 的web 页面里来查看。hadoop 的默认访问主页地址是 http://masternodename:50070/

下图是具体的步骤。


hadoop hdfs 基本操作
 

Java 方式:

。。。

相关推荐