开源分布式文件系统GlusterFS 3.3 发布
- - InfoQ cnGluster团队在2012年5月31日发布了 GlusterFS 3.3. GlusterFS的上一个稳定版本号是3.2.6，虽然从版本号上看貌似改进并不大，如果你仔细阅读了3.3的新特性列表之后，也许会觉得GlusterFS社区的版本号取得太保守了. 作为Gluster项目的一部分，GlusterFS项目在2005伊始.
开源分布式文件系统GlusterFS 3.3 发布
标签：
开源
分布
文件系统
| 发表时间：2012-06-06 15:29 | 作者：
出处：http://pipes.yahoo.com/pipes/pipe.info?_id=10560380f804c7341f042a2b8a03e117
Gluster团队在2012年5月31日发布了 GlusterFS 3.3。GlusterFS的上一个稳定版本号是3.2.6，虽然从版本号上看貌似改进并不大，如果你仔细阅读了3.3的新特性列表之后，也许会觉得GlusterFS社区的版本号取得太保守了。
作为Gluster项目的一部分，GlusterFS项目在2005伊始。2007年他们发布了第一个稳定的版本——1.2.3。2011年10月4日，RedHat收购了Gluster并开始着手开发3.3.0版本。同时RedHat还宣布了其RedHat Storage 2.0产品，其基础就是GlusterFS。
GlusterFS是一个开源的（基于GNU GPLv3协议）分布式文件系统，用户可以使用多台服务器，并通过以太网或者Infiniband RDMA互联从而组成一个GlusterFS的集群。GlusterFS集群对外提供NFS，CIFS和Gluster Native（通过FUSE进行挂载）的接口以便用户访问GlusterFS的存储池。 
GlusterFS统一挂载方式（摘自 http://www.gluster.org/about/）
与Hadoop HDFS不同的是：GlusterFS使用了弹性哈希算法来定位文件存储的位置。 由于使用了弹性哈希算法，GlusterFS不需要专门的Meta-Data Server来保存元数据，因此可以避免因为元数据服务器宕机导致的整个集群不可用。也正是因为不需要元数据服务器，所以GlusterFS在多个挂载点同时进行数据读写的时候，其整体性能很突出。
在GlusterFS 3.3版本中增加的新功能包括：
- 统一的文件和对象存储：GlusterFS实现了OpenStack里的对象存储API提供同步读取和写入文件或对象的数据的访问。
- HDFS兼容： 使Hadoop的管理员在GlusterFS的非结构化数据上运行MapReduce任务，并可以通过常用的工具和shell脚本访问GlusterFS上的数据。
- 主动自我修复：GlusterFS卷可以在宕机恢复之后自动从备份服务器上恢复数据。
- Granular锁：允许在对大文件的自我修复过程中访问数据，这个功能对于把GlusterFS作为虚拟机磁盘镜像存储服务器时及其重要。
- 改进的复制策略：系统在写入数据时，只有当用户指定的备份数量的写入操作都完成时才返回。该功能为用户提供了在数据安全性和性能之间做权衡的能力。
如果想了解更多更详细的信息可以去GlusterFS的官方网站： http://www.gluster.org/
感谢 郑柯对本文的审校。
给InfoQ中文站投稿或者参与内容翻译工作，请邮件至 [email protected]。也欢迎大家通过新浪微博（ @InfoQ）或者腾讯微博（ @InfoQ）关注我们，并与我们的编辑和其他读者朋友交流。
相关 [开源 分布 文件系统] 推荐：
分布式内存文件系统：Tachyon
- - 杨尚川的个人页面Tachyon是一个分布式内存文件系统，可以在集群里以访问内存的速度来访问存储在Tachyon里的文件. Tachyon是架构在最底层的分布式文件系统和上层的各种计算框架之间的一种中间件，其主要职责是将那些不需要落地到DFS里的文件，落地到分布式内存文件系统中，来达到共享内存，从而提高效率，减少内存冗余，减少GC时间等.
FastDFS分布式文件系统
- - 开源软件 - ITeye博客 FastDFS是一个开源的轻量级 分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题. 特别适合以中小文件（建议范围：4KB < file_size <500MB）为载体的在线服务，如相册网站、视频网站等等.
FastDFS分布式文件系统架构
- - 企业架构 - ITeye博客FastDFS分布式文件系统架构. FastDFS是一个开源的分布式文件系统，她对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题. 特别适合以文件为载体的在线服务，如相册网站、视频网站等等. 二、 FastDFS系统架构.
Filer.js：简化HTML5文件系统API开发的开源JS库
- - HTML5研究小组在 W3C 的工作草案中，有一个雄心勃勃的底层 Web 标准开发计划即 HTML5 文件系统（Firesystem）API 规范. 所谓 Filesystm API 是一个提供在用户自定义的沙盒文件系统中读取与写入文件及目录的接口. 不过正如文件系统一样，该 API 代码较长而且复杂. 为此 Google Chorme 团队的工程师 Eric Bidelman 写了一个基于它的 JavaScript 包装库，Bidlelman 将其命名为 filer.js 并放在了 GitHub 上.
开源 exFAT 文件系统发布 1.0 版
- - ITeye资讯频道微软exFAT文件系统的自由软件实现 fuse-exfat项目宣布 发布了1.0版，支持Linux、FreeBSD和OS X，采用 GPLv3授权. exFAT是微软设计的一种现代文件系统，旨在让外置储存设备（如U盘和消费电子设备上的记忆卡）和PC之间实现无缝的TB级数据转移和数据交换，支持Windows和OS X，支持最大512TB磁盘，文件大小限制在16EB.
[探讨]分布式文件系统的应用及选择
- - CSDN博客推荐文章当下，互联网行业发展非常迅猛，分布式文件系统在其中的应用也非常普遍. 一些朋友问起一些相关问题，如：. 搜索引擎类的那些页面文本文件存储，用什么DFS比较好. 海量小图片类的，如taobao里头，好多商家图片，用什么存储. 视频类的，如优酷，用什么DFS. 它只需要能把那些文本文件分块分散到各个节点上进行顺序存储就行了.
FastDFS+Nginx轻量级分布式文件系统安装使用
- - Linux - 操作系统 - ITeye博客FastDFS的安装使用. FastDFS是一个开源的轻量级 分布式文件系统，它对文件进行管理，功能包括：文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题. 特别适合以文件为载体的在线服务，如相册网站、视频网站等等. FastDFS服务端有两个角色：跟踪器（tracker）和存储 节点（storage）.
分布式文件系统FastDFS设计原理及技术架构
- - mysqlopsFastDFS是一个开源的轻量级分布式文件系统，由跟踪服务器（tracker server）、存储服务器（storage server）和客户端（client）三个部分组成，主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB < file_size <500MB）为载体的在线服务. Storage server（后简称storage）以组（卷，group或volume）为单位组织，一个group内包含多台storage机器，数据互为备份，存 储空间以group内容量最小的storage为准，所以建议group内的多个storage尽量配置相同，以免造成存储空间的浪费.
Hadoop分布式文件系统HDFS和OpenStack对象存储系统Swift有何不同？
- - ITeye博客HDFS使用 集中式单一节点架构(NameNode)来维护文件系统元数据，而在Swift中，元数据 分布在整个集群中并拥有多个副本. 注意：集中式元数据存储使HDFS存在单点故障和扩展性问题，因此规模越大就性能越低，就越难扩展甚至不能扩展，所幸的是HDFS2使用NameNode HA和HDFS Federation解决了这两个问题.