面向Key?Value系统的compaction粗粒度进程级并行优化方法及系统

扫码查看

原文链接

NSTL

中文摘要：本发明公开了面向Key?Value系统的compaction粗粒度进程级并行优化方法及系统，所述方法包括：主进程接收到读写请求后判断是否需要调度compaction线程，若是，主进程将compaction线程中的任务信息分割为主进程子任务和从进程子任务；主进程和从进程分别对主进程子任务和从进程子任务进行compaction操作；主进程在主进程完成主进程子任务compaction操作且从进程完成从进程子任务compaction操作后对Key?Value系统的文件进行优化。本发明利用主进程完成Key?Value系统中compaction任务的动态分割，并实现了与从进程协同compaction处理的新模式，挖掘了compaction任务的进程级并行性，充分利用了CPU的计算资源，提高了CPU资源的利用率，且优化了compaction消耗的时间，不仅提高了数据处理的实时性，而且提高了系统性能以及吞吐量。

申请号：

CN201710486056

公开号：

CN107291541A

专利类型：

发明专利

申请日：

2017-06-23

公开日：

2017-10-24

IPC分类：

G06F9/48(2006.01)I

申请人：

安徽大学

发明人：

刘伟、施巍松、孙辉

主申请人地址：

230000 安徽省合肥市肥西路3号

国别省市代码：

中国(CN)