首页|基于Hadoop平台的灾害大数据处理及可视化

基于Hadoop平台的灾害大数据处理及可视化

扫码查看
随着监测技术的进步,地震数据量不断增加,增长速度日渐加快.数据处理过程中原始数据可能存在缺失、异常值和格式问题,需要进行细致处理.HBase是一个适合存储和处理大规模数据的分布式数据库,通过使用MapReduce的Bulk-Load方法,可以更高效地将海量数据导入到HBase中.这样结合Hadoop平台分布式的优势,可以提高运算分析的速度,便于对数据进行研究.通过可视化展示,可以更好地利用数据进行研究分析,为灾害应对提供有力支持.
Disaster Big Data Processing and Visualization Based on Hadoop Platform
With the advancement of monitoring technology,the amount of seismic data continues to increase and the growth rate is accelerating.During the data processing,there may be missing,abnormal values,and formatting issues in the original data,which re-quire careful handling.HBase is a distributed database suitable for storing and processing large-scale data.By using MapReduce's BulkLoad method,massive data can be more efficiently imported into HBase.This combination of the advantages of distributed Ha-doop platform can improve the speed of computational analysis and facilitate the study of data.Through visual display,data can be better utilized for research and analysis,providing strong support for disaster response.

disaster big data processingHadoop platformHBase databasevisualization

汤笛、吴长梦涛、张欣悦、尹茂鹏、张子涵、陈新房

展开 >

防灾科技学院,河北 廊坊 065201

灾害大数据处理 Hadoop平台 HBase数据库 可视化

防灾科技学院大学生创新创业训练计划(2023)

X202311775173

2024

电脑与电信
广东省对外科技交流中心

电脑与电信

影响因子:0.117
ISSN:1008-6609
年,卷(期):2024.(4)
  • 8