九、HDFS安全模式,快照,回收站,配额管理的用法
发表于:2026-11-02 作者:千家信息网编辑
千家信息网最后更新 2026年11月02日,一、安全模式hdfs最开始开始开启集群的时候,会处于安全模式下,此时内部正检查集群中的副本率是否满足配置文件中所配置的副本率1、如果不满足就需通过节点间的复制满足副本率后才会退出安全模式。2、如果大于
千家信息网最后更新 2026年11月02日九、HDFS安全模式,快照,回收站,配额管理的用法
一、安全模式
hdfs最开始开始开启集群的时候,会处于安全模式下,此时内部正检查集群中的副本率是否满足配置文件中所配置的副本率
1、如果不满足就需通过节点间的复制满足副本率后才会退出安全模式。
2、如果大于所配置的副本率,就会通过删除多于副本来降低副本率
检查安全模式的情况:
hdfs dfsadmin -safemode get|enter|leave|wait注意:
处于安全模式下时,无法对hdfs中的文件进行写,修改操作,只能进行读操作。
1、最小副本条件的设置
dfs.replication.min, 默认是1二、快照
这是对hdfs中某个目录做的一个备份。默认情况下,每个目录的快照功能是关闭的,所以如果要给该目录创建快照,就得给该目录开启快照功能。
开启快照:
hdfs dfsadmin -allowSnapshot 关闭快照:
hdfs dfsadmin -disallowSnapshot 显示所有能创建快照的目录:
hdfs lsSnapshottableDir比较两个快照不同的地方:
//比较一个目录的两个快照的不同hdfs snapshotDiff 快照目录 快照1 快照2//比较目录和快照的不同,中间那个"."表示当前目录,不可省略hdfs snapshotDiff 快照目录 . 快照1创建快照:
//快照的目录 快照的名称(可选)hdfs dfs -createSnapshot []创建的快照状态会存储在所创建快照的目录下的 .snapshot// 这个目录下 删除快照:
//快照的目录 快照的名称(必须要有,因为一个目录可能有多个快照)hdfs dfs -deleteSnapshot 重命名快照:
//快照的目录 快照的名称(必须要有,因为一个目录可能有多个快照)hdfs dfs -renameSnapshot 从快照中恢复内容:
可以直接从 /.snapshot// 中查看到所有的文件以及目录,需要哪个文件就拷贝哪个文件。snapshotDir为创建了快照的目录 三、hdfs回收站
回收站默认是关闭的,需要在配置文件中设置开启
1、开启回收站
修改core-site.xml,然后重启hdfs
fs.trash.interval 2 fs.trash.checkpoint.interval 1 2、查看回收站
开启回收站之后,当我们删除hdfs的文件时,删除的文件会移动到 hdfs的/user/USERNAME/.trash/Current/ 下,其中USERNAME是当前操作hdfs 的有用户名。所以实际上就是剪切操作。
注意:
通过程序删除的文件不会移动到回收站中,需要显式将文件移动到回收站。如果是通过命令行的是会移动到回收站的。
3、通过程序将文件移动到回收站
//创建回收站对象Trash tsh = new Trash(conf);Path path = new Path(pathString);//将指定文件移动到回收站tsh.moveToTrash(path);4、清空回收站
hdfs dfs -expunge5、从回收站恢复文件
直接从回收站的路径剪切到指定路径下即可
四、配额
//名称配额,简单说就是该目录下文件和目录的总个数的限制hdfs dfsadmin -setQuota N HDFS目录1 HDFS目录2..... 设置名称配额hdfs dfsadmin -clrQuota HDFS目录1 HDFS目录2..... 取消名称配额//空间配额,简单说就是该目录的存储空间限制hdfs dfsadmin -setSpaceQuota N单位(如:1GB) [-storageType ] HDFS目录1 HDFS目录2..... 设置空间配额hdfs dfsadmin -clrSpaceQuota [-storageType ] HDFS目录1 HDFS目录2..... 取消空间配额其中 storageType 有以下类型:RAW-DISK:原始物理磁盘DISK: 分区空间SSD: 固态硬盘ARCHIVE:
快照
目录
回收站
文件
配额
副本
名称
移动
安全
模式
空间
配置
不同
就是
两个
功能
多个
情况
程序
路径
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
上海挚品互联网科技有限公司
科技企业和互联网企业
深圳科技互联网
北京互联网科技
深圳互联网络科技有限公司
万易互联网科技有限公司
苏州互联网科技贷款公司
壕鑫互联网络科技
亿人帮互联网科技
科技类的互联网平台
北京大学互联网科技怎么样
湖南诚度互联网科技有限公司
昭通互联网科技选哪家
浙南科技城互联网大厦建设工程
中国互联网有什么科技
梅州GM互联网络科技有限公司
抖集互联网科技技术咨询
西安左小互联网科技有限公司
10位科技互联网大佬
伍佰万互联网科技是干嘛的
深圳互联网络科技有限公司
互联网科技公司官网
小马过河互联网科技
福州新华互联网科技学校 知乎
贵州叶脉互联网科技有限公司所属行业
宁夏众和广鑫互联网科技有限公司
成都互联网科技公司工作好不好
无锡工业互联网科技有限公司
科技互联网的核心竞争力
伍佰万互联网科技是干嘛的