Hadoop的shell操作

打开虚拟机进入linux系统进入Hadoop目录下

多用tab键它可以自动补齐命令

1. 启动Hadoop集群

start-all.sh        等价于 start-dfs.sh 和 start-yarn.sh

2. 关闭Hadoop集群

stop-all.sh

3. 查看启动的服务进程

jps

4. 查看HDFS上的文件和目录

hadoop fs -ls /

hadoop fs -ls -R      //-R是递归

5. 查看文件内容

hadoop fs -cat HDFS文件路径    //可在192.168.5.100：50070中Utillities中Browse the file system查看

6. 查看集群的工作状态

hdfs dfsadmin -report

7. 清屏

clear

以下个人觉得慎用

1. 在HDFS上创建文件夹

hadoop fs -mkdir -p /test/name

2. 上传文件

hadoop fs -put source(本地文件路径) dest(HDFS路径)

3. 下载文件

hadoop fs -get source(HDFS路径) dest(本地文件路径)

4. 删除文件

hadoop fs -rm HDFS文件路径
hadoop fs -rm -r HDFS目录路径