CDH5之Trash

2016-02-18 1940 收藏

参考: http://my.oschina.net/cloudcoder/blog/179381
      http://www.linuxidc.com/Linux/2012-02/55102.htm

查看CDH 的hdfs的配置,是否开启trash 及 保留时间:

测试:

点击(此处)折叠或打开

1. 1.创建test.txt
   
2. [root@sht-sgmhadoopnn-01 ~]# vi /tmp/test.txt
   
3. 1
   
4. 2
   
5. 3
   
6. 4
   
7. 5
   
8. 
   
9. 2.创建文件夹
   
10. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -mkdir /testdir
    
11. You have new mail in /var/spool/mail/root
    
12. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -ls /
    
13. Found 4 items
    
14. drwxr-xr-x - hdfs supergroup 0 2016-02-04 00:38 /system
    
15. drwxr-xr-x - root supergroup 0 2016-02-19 08:17 /testdir
    
16. drwxrwxrwt - hdfs supergroup 0 2016-02-10 16:04 /tmp
    
17. drwxr-xr-x - hdfs supergroup 0 2016-02-10 16:02 /user
    
18. 
    
19. 3.put 文件到hadoop
    
20. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -put /tmp/test.txt /testdir
    
21. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -ls /testdir
    
22. Found 1 items
    
23. -rw-r--r-- 3 root supergroup 10 2016-02-19 08:18 /testdir/test.txt
    
24. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -cat /testdir/test.txt
    
25. 1
    
26. 2
    
27. 3
    
28. 4
    
29. 5
    
30. You have mail in /var/spool/mail/root
    
31. 
    
32. 4.删除文件夹testdir
    
33. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -rm -r /testdir
    
34. 16/02/19 08:27:05 INFO fs.TrashPolicyDefault: Namenode trash configuration: Deletion interval = 1440 minutes, Emptier interval = 0 minutes.
    
35. Moved: 'hdfs://sgm-nameservice/testdir' to trash at: hdfs://sgm-nameservice/user/root/.Trash/Current
    
36. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -ls /
    
37. Found 3 items
    
38. drwxr-xr-x - hdfs supergroup 0 2016-02-04 00:38 /system
    
39. drwxrwxrwt - hdfs supergroup 0 2016-02-10 16:04 /tmp
    
40. drwxr-xr-x - hdfs supergroup 0 2016-02-10 16:02 /user
    
41. You have mail in /var/spool/mail/root
    
42. 
    
43. 5.查看回收站
    
44. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -ls /user/root/.Trash/Current
    
45. Found 1 items
    
46. drwxr-xr-x - root supergroup 0 2016-02-19 08:18 /user/root/.Trash/Current/testdir
    
47. 
    
48. 6.恢复文件夹
    
49. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -mv /user/root/.Trash/Current/testdir /
    
50. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -ls /
    
51. Found 4 items
    
52. drwxr-xr-x - hdfs supergroup 0 2016-02-04 00:38 /system
    
53. drwxr-xr-x - root supergroup 0 2016-02-19 08:17 /testdir
    
54. drwxrwxrwt - hdfs supergroup 0 2016-02-10 16:04 /tmp
    
55. drwxr-xr-x - hdfs supergroup 0 2016-02-10 16:02 /user
    
56. [root@sht-sgmhadoopnn-01 ~]# hadoop fs -cat /testdir/test.txt
    
57. 1
    
58. 2
    
59. 3
    
60. 4
    
61. 5

上一篇 下一篇

微信关注我们

原文链接：https://yq.aliyun.com/articles/578908

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

SparkContext的初始化（伯篇）——执行环境与元数据清理器

《深入理解Spark：核心思想与源码分析》一书前言的内容请看链接《深入理解SPARK：核心思想与源码分析》一书正式出版上市 《深入理解Spark：核心思想与源码分析》一书第一章的内容请看链接《第1章 环境准备》 《深入理解Spark：核心思想与源码分析》一书第二章的内容请看链接《第2章 SPARK设计理念与基本架构》 由于本书的第3章内容较多，所以打算分别开辟三篇随笔分别展现。本文展现第3章第一部分的内容： 第3章 SparkContext的初始化 “道生一，一生二，二生三，三生万物。”——《道德经》 本章导读： SparkContext的初始化是Driver应用程序提交执行的前提，本章内容以local模式为主，并按照代码执行顺序讲解，这将有助于首次接触Spark的读者理解源码。读者朋友如果能边跟踪代码，边学习本章内容，也许是快速理解SparkContext初始化过程的便捷途径。已经熟练使用Spark的开发人员可以选择跳过本章内容。 本章将在介绍SparkContext初始化过程的同时，向读者介绍各个组件的作用，为阅读后面的章节打好基础。Spark中的组件很多，就其功能而言...

2016-02-18

603

上一篇

Spark的调度策略详解

Spark的调度策略 Spark目前有两种调度策略，一种是FIFO即先来先得，另一种是FAIR即公平策略。所谓的调度策略就是对待调度的对象进行排序，按照优先级来进行调度。调度的排序接口如下所示，就是对两个可调度的对象进行比较。 private[spark] trait SchedulingAlgorithm { defcomparator(s1: Schedulable, s2: Schedulable): Boolean } 其实现类为FIFOSchedulingAlgorithm、FairSchedulingAlgorithm /** * FIFO排序的实现，主要因素是优先级、其次是对应的Stage * 优先级高的在前面，优先级相同，则靠前的stage优先 */private[spark] classFIFOSched

2016-02-19

706

下一篇

相关文章

发表评论

发表

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

时间: 2025-12-12 大小: 211.28KB 下载: 54次

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

时间: 2025-12-17 大小: 5MB 下载: 1次

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

时间: 2025-12-17 大小: 1.42GB 下载: 1次

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

时间: 2025-12-03 大小: 9.84MB 下载: 39次