首页|自适应性数据重删技术在大数据管理中的应用研究

自适应性数据重删技术在大数据管理中的应用研究

Data Deduplication Technology of Automatic Adaptation in Big Data Management

扫码查看
原文链接
  • NETL
  • NSTL
  • 维普
  • 万方数据
为解决传统的离线和在线数据备份系统存在的效率低、功能单一、资源开销大等问题,本文构建了自适应性重复数据删除技术的文件备份系统,灵活使用用在线和离线重删技术,动态配置自适应性重删参数,既有效删除重复数据,提升数据备份效率,还充分利用生产环境的硬件计算资源.实践结果表明针对结构化数据,自适应性重删率高达10倍左右,且仅占在线重删技术的计算资源开销的43％,占离线重删技术存储开销的46％.实践结果验证了自适应性数据重删技术在大数据管理中的可行性,为数据备份和保护提供了一种新的工作思路.

automatic adaptationdata deduplicationbackuponlineoffline

陈正奎

展开 >

浙江理工大学 计算机科学与技术学院 杭州 310018

自适应性 数据重删 备份 在线 离线

浙江省重点研发"尖兵"攻关计划

2023C01119

2023

10.20064/j.cnki.2095-347X.2023.04.007

网络新媒体技术
中国科学院声学研究所

网络新媒体技术

CSTPCD
影响因子：0.208
ISSN：2095-347X
年,卷(期)：2023.12(4)
  • 13