搜索[分布式文件系统]结果-低调大师优秀个人博客

精选列表

搜索[分布式文件系统]，共10000篇文章

Chrome 更新导致部分 macOS 的文件系统损坏，无法重启

Chrome 近期自动更新的版本包含了一个 bug，影响到了 Mac 设备的系统完整性保护（SIP）功能以及 OS X 10.11 之前版本的 macOS 用户，并可能造成文件系统的损坏。

2019-09-27

[ECS最佳实践]在裸设备上创建文件系统

请不要在ECS磁盘上创建分区，而是直接在裸设备上创建文件系统。

2019-05-18

学习笔记：python watchdog运维监控文件系统事件实战

情况介绍由于公司准备做Jenkins的前端自动化发布，但是前端的Node.js环境不统一，所以暂时先搁置，采用Ftp上传文件更新项目，因此想到了可以采用文件监控的形式来进行自动化上传。Python语言的优越性就体现出来了，其中有很多很棒的库，本篇即将用到的就是watchdog库。 watchdog库介绍 watchdog用来监控指定目录文件的变化，例如添加删除文件或目录，修改文件内容、重命名文件或目录等，每种变化都会产生一个事件，且有一个特定的事件类与之对应，然后再通过事件处理类来处理对应的事件，至于怎么样处理事件完全可以自定义，只需继承事件处理类的基类并重写对应实例方法。实战准备 1.Python环境（系统自带Python2.7.5） 2.安装watchdog库(pip install watchdog) 实例演示 #!/usr/bin/python # -*- coding:UTF-8 -*- import time from watchdog.observers import Observer from watchdog.events import RegexMatchingEventHandler import commands class MyHandler(RegexMatchingEventHandler): def __init__(self, regex_list=[r”.*”]): super(MyHandler, self).__init__(regex_list) def on_created(self, event): if event.is_directory: pass else: print(event.event_type, event.src_path) def on_deleted(self, event): if event.is_directory: pass else: print(event.event_type, event.src_path) def on_modified(self, event): if event.is_directory: pass else: print(event.event_type, event.src_path) node = event.src_path.split(‘/’,3)[2] if node == “cp”: commands.getstatusoutput(‘ansible-playbook /mm/node/tasks/node_cp.yml’) elif node == “genpindao”: commands.getstatusoutput(‘ansible-playbook /mm/node/tasks/node_genpindao.yml’) elif node == “login”: commands.getstatusoutput(‘ansible-playbook /mm/node/tasks/node_login.yml’) elif node == “ucenter”: commands.getstatusoutput(‘ansible-playbook /mm/node/tasks/node_ucenter.yml’) else: commands.getstatusoutput(‘ansible-playbook /mm/node/tasks/node.yml -e node=’+node) def on_moved(self, event): print(“move”, event.src_path, event.dest_path) if __name__ == “__main__”: reges = [r”.*\.c”, r”.*\.h”, r”.*\.cpp”] event_handler = MyHandler(reges) observer = Observer() observer.schedule(event_handler, “/node_ftp/”, recursive=True) observer.start() try: while True: time.sleep(2) except KeyboardInterrupt: observer.stop() observer.join() 实例分析 watchdog主要采用观察者模型。主要有三个角色：observer，event_handler，被监控的文件夹。三者原本是独立的，主要通过observer.schedule函数将三者串起来，意思为observer不断检测调用平台依赖代码对监控文件夹进行变动检测，当发现改变时，通知event_handler处理。关键点： 1.on_modified方法,是文件有变化触发的函数，上传Ftp目录后就需要调用此方法。 2.event是获取具体文件的路径，文中是为了获取具体的项目名称而进行的目录处理。 3.commands.getstatusoutput方法是调用系统的Shell命令。 4.observer.schedule方法第二个参数就是监控的具体的目录。 Tips：最后可以推荐读者有时间可以阅读一下watchdog的源码，写的清晰易懂而且架构很好。

2018-02-15

Hadoop默认支持集成OSS，作为Hadoop兼容的文件系统

背景 2017.12.13日Apache Hadoop3.0.0正式版本发布，默认支持阿里云OSS对象存储系统，作为Hadoop兼容的文件系统。

2017-12-17

Hadoop概念学习系列之Hadoop的文件系统（十六）

Hadoop整合了众多文件系统，它首先提供了一个高层的文件系统抽象类org.apache.hadoop.fs.FileSystem，这个抽象类展示了一个分布式文件系统，并有几个具体实现。

2017-11-13

linux中生成考核用的NTFS文件系统(历史版本)

见相关blog(ntfs案例一) 目的：生成一个NTFS文件系统，要求： 1、$MFT至少2个碎片 2、根目录下建90个以从1开始的数字编号为名的子目录，每个子目录下建80-100个文件，文件编号从1

2017-03-28

【分布式与虚拟化技术入门】分布式架构、分布式计算、分布式数据库、分布式存储、虚拟化技术

本文从阿里云大学课程中精选出分布式与虚拟化相关的课程，希望能够为你的云计算学习之路带来一些帮助。 1.

2017-08-03

Linux 6.9 弃用 ext2 文件系统驱动程序

在即将发布的 6.9 Linux 内核中，ext2 文件系统驱动程序将被标记为已弃用。

2024-03-27

从 HPC 到 AI：探索文件系统的发展及性能评估

分布式文件系统，作为一种高成本效益高的解决方案，正逐渐在 AI 和 HPC 场景中广泛应用。它们通过跨多个节点分布存储资源，有效地处理和管理大数据集，满足 HPC 对数据存取速度的高要求。

2024-03-06

极限挑战：使用 Go 打造百亿级文件系统的实践之旅

JuiceFS 企业版是一款为云环境设计的分布式文件系统，单命名空间内可稳定管理高达百亿级数量的文件。构建这个大规模、高性能的文件系统面临众多复杂性挑战，其中最为关键的环节之一就是元数据引擎的设计。

2024-02-02

文件系统考古：1974-Unix V7 File System

在文件系统的开始部分，我们可以找到超级块（superblock）。它位于文件系统的第 1 块。超级块存储了文件系统的一些基本信息，比如文件系统的大小、空闲块的数量、空闲索引节点的数量等。

2023-05-26

下一代 CoW 文件系统 Bcachefs 进入 Linux 内核

Bcachefs作为一个写时复制 (CoW) 文件系统已经发展了五年多，它最初从 Linux 内核的块缓存代码中诞生。

2023-05-13

Linux 6.4 改进了 F2FS 和 Btrfs 文件系统

Linux 6.4 合并窗口已收到F2FS（闪存友好文件系统）和 Btrfs 文件系统的优化补丁。

2023-04-26

Linux 引入新的 SSDFS 文件系统，针对 ZNS SSD 进行优化

Linux 6.3 最新补丁引入了 SSDFS 文件系统支持，这个新的开源文件系统特别针对 ZNS SSD （支持 NVMe 分区命名空间 (ZNS) 的固态硬盘）进行了优化。

2023-02-28

Red Hat 工程师开发新的“Composefs” Linux 文件系统

红帽工程师 Alexander Larsso 与 Giuseppe Scrivano宣布开发一个新的Linux 内核文件系统 “Composefs” ，Composefs是一个新的机会共享（opportunistically-sharing

2022-11-28

NTFS3 文件系统驱动“迟来”的提交，Linus 破例合并

NTFS3 是软件开发商 Paragon Software贡献给 Linux 内核的读/写文件系统驱动程序。根据此前的报道，NTFS 驱动经历了近半年没有重大更新的状态，甚至被建议标记为“孤儿项目”。

2022-08-19

云上共享文件系统的兼容性大比拼

文件按照层级关系组织为树形目录，构成了文件系统 的基本形态。用户使用文件系统来保存数据时，不必关心数据底层的存储方式，便可以按照约定的接口规范进行访问。

2022-03-03

通过公网上传下载数据到SMB文件系统

本文介绍如何通过公网将本地数据上传至SMB文件系统，或者将SMB文件系统内的数据下载到本地。

2020-07-21

Linux FAT 文件系统预读缺陷，补丁提升 7 倍性能

Linux 内核现在已经增加了对 exFAT 的支持，同时它也没有放弃维护原有 FAT 文件系统驱动，甚至现在从邮件列表上看，FAT 性能方面可能会有大幅提升。

2020-04-12

exFAT 文件系统最新驱动程序已进入 Linux 5.7 内核

上个月报道过由三星维护的 exFAT 最新驱动程序将会进入 Linux Kernel 5.7，以替代去年在 Linux Kernel 5.4 引入的旧版 exFAT 驱动。从邮件列表可以看到，Linus Torvalds 已将总计七千多行代码的新版exFAT 驱动合并进 Linux 5.7 内核。与新的驱动相比，目前使用的驱动版本属于较老（多年前）的实现。除此之外，新版驱动也是三星在其以百万计的 Android 设备中提供的驱动，三星会继续将其改进贡献到上游 Linux 内核。总而言之，新版驱动旧的更可靠，功能也更多，同时它将继续接受三星和其他公司贡献的改进。Linux 5.7 首个 RC 版本计划将在本周末发布，稳定版则计划在6月份发布。

2020-04-08

资源下载

更多资源

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。