HDFS(Hadoop Distributed File System)

HDFS:分布式文件系统，解决分布式存储

1、HDFS特点:

HDFS优点

1、支持处理超大文件
2、可运行在廉价机器上
3、高容错性
4、流式文件写入

HDFS缺点

1、不适合低延时数据访问场景
2、不适合小文件存取场景
3、不适合并发写入，文件随机修改场景

2、HDFS dfsadmin

dfsadmin命令用于管理HDFS集群

指令	功能说明
hdfs dfsadmin -report	返回集群的状态信息
hdfs dfsadmin -safemode enter/leave	进入和离开安全模式
hdfs dfsadmin -saveNamespace	保存集群的名字空间

hdfs dfsadmin -rollEdits	回滚编辑日志
hdfs dfsadmin -refreshNodes	刷新节点
hdfs dfsadmin -getDatanodeInfo node1:8010	获取数据节点信息
hdfs dfsadmin -setQuota 10 /hdfs	设置文件目录配额

3、HDFS CLI (命令行)

基本格式
hdfs dfs -cmd
hadoop fs -cmd（已过时）
命令和Linux相似

-ls
hdfs dfs -ls /
Hadoop核心HDFS介绍以及基础指令
-mkdir
hdfs dfs -mkdir /mydemo

-put
hdfs dfs -put /opt/zjw.txt /mydemo

-rm
hdfs dfs -rm /mydemo/zjw.txt

-help

-cat:只能看简单的文本文档
hdfs dfs -cat /mydemo/zjw.txt

创建多层文件夹-p
hdfs dfs -mkdir -p /mydemo/zjw

获取文件
hdfs dfs -get /mydemo/zjw/zjw.txt /opt/