首页|物联网大数据场景下的分布式哈希表适用条件分析

物联网大数据场景下的分布式哈希表适用条件分析

On Distributed Hash Table's Applicability to Internet-of-Things Big Data Management

扫码查看
原文链接
  • NETL
  • NSTL
  • 维普
  • 万方数据
针对"新基建"带来的物联网大数据管理真实应用场景中的挑战,本文对当前最优实践所用的大规模数据管理系统的核心——分布式哈希表(Distributed Hash Table,DHT),第一次基于极高写入负载和数据流量两个要素,进行了适用条件的理论推导分析.面向存储空间、带宽和时间三方面的限制关系,从理论上分析了写入负载和联网带宽对DHT负载再均衡条件的影响,并推导出DHT负载再均衡设计仅适用于一定规模的物联网数据管理场景,而不适用于大规模物联网数据管理的结论.利用了基于DHT的业界常用系统Cassandra的物联网数据负载实验以及系统级模拟器的大量仿真实验结果验证了理论推导结果的有效性.基于理论结果对真实案例进行了应用分析,表明本文的理论结果可用于分析解决当前基于DHT系统支撑物联网数据负载出现的问题,并可用于分析和指导物联网数据管理系统的设计.

安彦哲、朱妤晴、王建民

展开 >

清华大学软件学院 北京 100084

北京信息科学与技术国家研究中心(清华大学) 北京 100084

大数据系统软件国家工程实验室 北京 100084

物联网数据管理 分布式哈希表 负载均衡 时序数据 时序数据库

71690231

2021

10.11897/SP.J.1016.2021.01679

计算机学报
中国计算机学会 中国科学院计算技术研究所

计算机学报

CSTPCDCSCD北大核心
影响因子：3.18
ISSN：0254-4164
年,卷(期)：2021.44(8)
  • 10
  • 41