Fatman: Building Reliable Archival Storage Based on Low-Cost Volunteer Resources

覃安, 胡殿明, 刘俊, 杨文君, 谭待 · Acta Scientiarum Naturalium Universitatis Sunyatseni · 2015

我们现在的 Fatman,企业规模档案的存储基于从 under-utilized 网服务者的志愿者贡献资源,通常与业余存储能力在几千上部署了节点。Fatman 明确地为提高存在存储资源的利用并且砍倒硬件购买费用被设计。没有违背服务水平目的(SLO ) 并且没有减少档案的系统的可获得性,最小化费用,系统设计的二个主要担心的问题正在最大化志愿者节点的资源利用。Fatman 广泛地越过几 datacenters 在几万个服务者节点上被部署了,提供超过 100 PB 存储能力并且服务几十内部集体数据的申请。系统由强壮的隔离和预算限制认识到有效存储限额巩固,到没有任何降级,最大地在主人级的 SLO 上支持资源贡献。它使用新方法由把磁盘失败预言用于 minish 失败恢复花费的、命名差错知道的数据管理改进数据可靠性,戏剧性地在 76.3% 把吝啬的时间归结为修理(MTTR ) 并且减少真实产品工作量上的在 35% 的文件碰撞比率。

Read the paper · More papers on PaperTik