Versity 开源 ScoutFS 存档文件系统，可储存1万亿文件

内容简介：Versity Software 开源了它的存档文件系统 ScoutFS。这个项目始于 2016 年，旨在解决对更大的 POSIX 命名空间和更快的元数据处理的日益增长的要求，它设计能在单一的命名空间储存最多一万亿文件。 由于世界各地的...

Versity Software 开源了它的存档文件系统 ScoutFS。这个项目始于 2016 年，旨在解决对更大的 POSIX 命名空间和更快的元数据处理的日益增长的要求，它设计能在单一的命名空间储存最多一万亿文件。

由于世界各地的大型归档站点都在规划未来的数据存储系统，因此命名空间的可扩展性成了关注重点领域。当前技术通常依赖于中央服务器进行元数据管理，超过10亿个文件的数据收集变得难以管理。

2016年，Versity 开始研究一种新的归档文件系统，该系统专门用于通过使用节点集群来扩展元数据处理来管理超大型命名空间。然后“scale out filesystem（扩展文件系统）”即 ScoutFS 就诞生了。

ScoutFS 是第一个在 GPL 下发布的存档文件系统，兼容 POSIX，设计和实现将庞大数据集归档到低成本的外部储存源如磁带、磁盘、对象和云端。 

主要特性：

• 集成一致的索引以加速归档维护操作

• 共享 LSM 索引结构，用于根据存储带宽扩展元数据速率

• 从序列化设备写入解耦逻辑锁定以减少争用

编译自：Versity

【声明】文章转载自：开源中国社区 [http://www.oschina.net]

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持 码农网

查看所有标签

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。