Versity 开源 ScoutFS 存档文件系统,可储存1万亿文件

栏目: IT资讯 · 发布时间: 6年前

内容简介:Versity Software 开源了它的存档文件系统 ScoutFS。这个项目始于 2016 年,旨在解决对更大的 POSIX 命名空间和更快的元数据处理的日益增长的要求,它设计能在单一的命名空间储存最多一万亿文件。 由于世界各地的...

Versity Software 开源了它的存档文件系统 ScoutFS。这个项目始于 2016 年,旨在解决对更大的 POSIX 命名空间和更快的元数据处理的日益增长的要求,它设计能在单一的命名空间储存最多一万亿文件。

由于世界各地的大型归档站点都在规划未来的数据存储系统,因此命名空间的可扩展性成了关注重点领域。当前技术通常依赖于中央服务器进行元数据管理,超过10亿个文件的数据收集变得难以管理。

2016年,Versity 开始研究一种新的归档文件系统,该系统专门用于通过使用节点集群来扩展元数据处理来管理超大型命名空间。然后“scale out filesystem(扩展文件系统)”即 ScoutFS 就诞生了。

ScoutFS 是第一个在 GPL 下发布的存档文件系统,兼容 POSIX,设计和实现将庞大数据集归档到低成本的外部储存源如磁带、磁盘、对象和云端。 

主要特性:

  • 集成一致的索引以加速归档维护操作

  • 共享 LSM 索引结构,用于根据存储带宽扩展元数据速率

  • 从序列化设备写入解耦逻辑锁定以减少争用

Versity 开源 ScoutFS 存档文件系统,可储存1万亿文件

编译自:Versity


【声明】文章转载自:开源中国社区 [http://www.oschina.net]


以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

未来版图

未来版图

麻省理工科技评论 / 人民邮电出版社 / 2018-5-1 / CNY 69.80

《麻省理工科技评论》作为世界上历史悠久、影响力极大的技术商业类杂志,每年都会依据公司的科技领军能力和商业敏感度这两个必要条件,从全球范围内选取50家未来可能会成为行业主导的聪明公司。 这些聪明公司,并非都是行业巨头,甚至专利数量、公司所在地以及资金规模都不在考察范围内。 这些公司是“高精尖科技创新”与“能够保证公司利益* 大化的商业模式”的完 美融合。无论公办私营,无关规模大小,这些遍布全球......一起来看看 《未来版图》 这本书的介绍吧!

Base64 编码/解码
Base64 编码/解码

Base64 编码/解码

MD5 加密
MD5 加密

MD5 加密工具

SHA 加密
SHA 加密

SHA 加密工具