计算机应用研究2021,Vol.38Issue(6) :1734-1738.DOI:10.19734/j.issn.1001-3695.2020.06.0167

海量视频数据分布式存储性能优化方法研究

Research on performance optimization of distributed storage of massive video data

刘艳 曹晓倩
计算机应用研究2021,Vol.38Issue(6) :1734-1738.DOI:10.19734/j.issn.1001-3695.2020.06.0167

海量视频数据分布式存储性能优化方法研究

Research on performance optimization of distributed storage of massive video data

刘艳 1曹晓倩1
扫码查看

作者信息

  • 1. 大连大学 大连市环境感知与智能控制重点实验室,辽宁 大连 116622;大连大学 信息工程学院,辽宁 大连 116622
  • 折叠

摘要

针对文件系统存储效率低、多余副本导致空间浪费以及磁盘能源损耗严重的问题,提出一种新型分布式优化存储策略(distributed optimized storage strategy,DOSS).首先,引入Bcache混合存储技术在磁盘阵列前增设固态硬盘,作为高速缓冲区对多路视频流进行临时数据组织,变多线程并发写任务为单线程顺序写入任务,规避磁盘内部碎片产生,有效提高系统写入效率.其次,提出改进的liberation码对视频数据进行压缩存储,在保证系统可靠性的同时提高磁盘空间利用率.最后,基于ioctl系统调用编写盘片转速控制函数,实现磁盘多级休眠和低延迟唤醒,减低磁盘能耗,提高使用寿命.结果表明单台存储服务器在500路4 Mbps并发视频流下存储效率提高约36%,存储空间节省约40%,系统应对12000路并发视频流时仍存在休眠磁盘约10%.

关键词

分布式视频存储/磁盘优化/Bcache/纠删码/ioctl系统调用

引用本文复制引用

基金项目

辽宁省重点研发计划指导计划项目(2017104014)

辽宁省科学事业公益研究基金(20170053)

出版年

2021
计算机应用研究
四川省电子计算机应用研究中心

计算机应用研究

CSTPCDCSCD北大核心
影响因子:0.93
ISSN:1001-3695
被引量5
参考文献量8
段落导航相关论文