Java教程

HDFS常用操作

本文主要是介绍HDFS常用操作,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!

1.启动与关闭Hadoop服务

$cd /usr/local/java/hadoop/hadoop-3.3.1 //进入hadoop安装路径

$./sbin/start-dfs.sh                                       //启动 hdfs 服务

$./stop-all.sh                         //停止Hadoop服务

2.查看命令

例如:查询put命令的具体用法

$./bin/hdfs dfs –help put(-必须是英文符号)

3.目录操作

首先切换目录到自己的Hadoop版本下。

创建目录:

$./bin/hdfs dfs -mkdir -p /user/hadoop //创建/user/hadoop 两级目录,因此参数 为-p

$./bin/hdfs dfs –mkdir input        //创建input目录

查看目录:

$./bin/hdfs dfs –ls /user/hadoop        

$./bin/hdfs dfs –ls

删除目录:

$./bin/hdfs dfs –rm –r /input     //-r 表示删除目录及其子目录

4.文件操作

本地文件上传到HDFS文件系统:

$./bin/hdfs dfs -put /home/hadoop/myTestFile.txt

$./bin/hdfs dfs -ls 或者用 $./bin/hdfs dfs -ls . //查看是否上传成功

查看内容:

$ ./bin/hdfs dfs -cat myTestFile.txt //查看上传到 HDFS 文件内容

复制内容:

$ ./bin/hdfs dfs -cp myTestFile.txt /input

从HDFS中下载文件到本地:

$./bin/hdfs dfs -get input/myTestFile.txt /home/hadoop

5.安全模式

$hdfs dfsadmin -safemode enter    //进入安全模式

$hdfs dfsadmin -safemode leave    //退出安全模式

这篇关于HDFS常用操作的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!