《计算机应用研究》|Application Research of Computers

海量视频数据分布式存储性能优化方法研究

Research on performance optimization of distributed storage of massive video data

免费全文下载 (已被下载 次)  
获取PDF全文
作者 刘艳,曹晓倩
机构 大连大学 大连市环境感知与智能控制重点实验室;大连大学 信息工程学院
统计 摘要被查看 次,已被下载
摘要 针对文件系统存储效率低、多余副本导致空间浪费以及磁盘能源损耗严重的问题,提出一种新型分布式优化存储策略(Distributed Optimized Storage Strategy ,DOSS)。首先,引入Bcache混合存储技术在磁盘阵列前增设固态硬盘,作为高速缓冲区对多路视频流进行临时数据组织,变多线程并发写任务为单线程顺序写入任务,规避磁盘内部碎片产生,有效提高系统写入效率。其次,提出改进的liberation码对视频数据进行压缩存储,在保证系统可靠性的同时提高磁盘空间利用率。最后,基于ioctl系统调用编写盘片转速控制函数,实现磁盘多级休眠和低延迟唤醒,减低磁盘能耗,提高使用寿命。结果表明单台存储服务器在500路4Mbit/s并发视频流下存储效率提高约36%,存储空间节省约40%,系统应对12000路并发视频流时仍存在休眠磁盘约10%。
关键词 分布式视频存储;磁盘优化;Bcache;纠删码;ioctl系统调用
基金项目 辽宁省重点研发计划指导计划项目(2017104014)"辽宁省科学事业公益研究基金"(20170053)
本文URL http://www.arocmag.com/article/02-2021-05-013.html
收稿日期
修回日期
页码 -
中图分类号 TP311.13
文献标志码