计算机研究与发展2021,Vol.58Issue(2) :305-318.DOI:10.7544/issn1000-1239.2021.20200383

基于蚁群优化算法的纠删码存储系统数据更新方案

An Ant Colony Optimization Algorithms Based Data Update Scheme for Erasure-Coded Storage Systems

李乾 胡玉鹏 叶振宇 肖叶 秦拯
计算机研究与发展2021,Vol.58Issue(2) :305-318.DOI:10.7544/issn1000-1239.2021.20200383

基于蚁群优化算法的纠删码存储系统数据更新方案

An Ant Colony Optimization Algorithms Based Data Update Scheme for Erasure-Coded Storage Systems

李乾 1胡玉鹏 1叶振宇 1肖叶 1秦拯1
扫码查看

作者信息

  • 1. 湖南大学信息科学与工程学院 长沙410082
  • 折叠

摘要

由于纠删码具备高可用性和高存储空间有效性的特点,采用纠删码为大规模分布式存储系统提供数据持久性已成为事实标准然而,纠删码的密集型更新操作将导致大量的数据传输和I/O开销.如何减少数据传输量,优化现有网络资源的利用率,以提高纠删码的更新效率,成为纠删码存储系统面临的重要挑战.然而,在多重服务质量(quality of service,QoS)指标下,目前对纠删码更新效率的优化研究很少.针对此问题,提出一种基于蚁群优化算法的多数据节点更新方案(ant colony optimization algorithm based multiple data nodes update scheme,ACOUS),采用2阶段数据更新方式以优化多数据节点更新过程.具体而言,基于多目标蚁群优化更新路由算法(multi-objective ant colony optimization update routing algorithm,MACOU)所构建的多目标更新树,2阶段数据更新方式能有效地进行数据增量收集和校验增量分发大量的实验结果表明,在典型的数据中心网络拓扑结构下,与TA-Update方案相比,所提方案能够在保证算法收敛的前提下,以可忽略的计算开销为代价,将更新时延降低26%~37%.

关键词

分布式存储系统/数据更新/纠删码/蚁群优化/更新时延

引用本文复制引用

基金项目

国家自然科学基金(61872130)

国家自然科学基金(61572181)

湖南省交通厅科技项目(201928)

长沙市重点研发计划项目(kq1907103)

出版年

2021
计算机研究与发展
中国科学院计算技术研究所 中国计算机学会

计算机研究与发展

CSTPCDCSCD北大核心
影响因子:2.649
ISSN:1000-1239
被引量2
参考文献量1
段落导航相关论文