中国网管论坛

 找回密码
 注册
QQ登录 只需一步,快速开始
网管赚钱丨推荐设2345主页游戏攻略/CS/LOL/DNFLinux常用命令大全云计算/云技术频道
IP地址在线计算器网管软件,网管工具论坛积分购买 
查看: 701|回复: 0
打印 上一主题 下一主题

[分享交流] 兄/弟连Hadoop教程之回收站

[复制链接]
跳转到指定楼层
楼主
发表于 2017-7-14 09:54:50 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
兄/弟连Hadoop教程之回收站

Hadoop之回收站
一、回收站简介:

    在HDFS里,删除文件时,不会真正的删除,其实是放入回收站/trash,回收站里的文件可以快速恢复。

    可以设置一个时间阀值,当回收站里文件的存放时间超过这个阀值或是回收站被清空时,文件才会被彻底删除,并且释放占用的数据块。

二、实例:
    Hadoop的回收站trash功能默认是关闭的,所以需要在core-site.xml中手动开启。

1、修改core-site.xml,增加:

复制代码
<property>  <name>fs.trash.interval</name>  <value>1440</value>  <description>Number of minutes between trash checkpoints.  If zero, the trash feature is disabled.  </description>  </property>
复制代码
默认是0,单位是分钟,这里设置为1天。
删除数据rm后,会将数据move到当前文件夹下的.Trash目录。

2、测试
1)、新建目录input
hadoop/bin/hadoop fs -mkdir input
2)、上传文件
root@master:/data/soft# hadoop/bin/hadoop fs -copyFromLocal /data/soft/file0* input
3)、删除目录input
[root@master data]# hadoop fs -rmr input  Moved to trash: hdfs://master:9000/user/root/input
4)、查看当前目录
[root@master data]# hadoop fs -ls  Found 2 items  drwxr-xr-x - root supergroup 0 2011-02-12 22:17 /user/root/.Trash
发现input删除了,多了一个目录.Trash

5)、恢复刚刚删除的目录
[root@master data]# hadoop fs -mv /user/root/.Trash/Current/user/root/input /user/root/input

6)、查看恢复的数据
[root@master data]# hadoop fs -ls input  Found 2 items  -rw-r--r-- 3 root supergroup 22 2011-02-12 17:40 /user/root/input/file01  -rw-r--r-- 3 root supergroup 28 2011-02-12 17:40 /user/root/input/file02

7)、删除.Trash目录(清理垃圾)
[root@master data]# hadoop fs -rmr .Trash  Deleted hdfs://master:9000/user/root/.Trash

【兄/弟连大数据培训】专注IT培训11年,学习5个月包就业! 毕业拿高薪!赵老师电话 1771>011>6169/ 联·系我免·费领·取兄/弟连视频教程~

您需要登录后才可以回帖 登录 | 注册
本版积分规则
QQ|小黑屋|手机版|Archiver|武松娱乐 ( 沪ICP备08026629号 )  GMT+8, 2018-2-26 07:36
Powered by Discuz! X3.1 © 1999-2014 bitsCN.com
快速回复 返回顶部 返回列表
武松娱乐注册