基于数据中台的建筑业数据清洗算法研究

曾莎洁 ¹陶兴 ²张承雄¹

扫码查看

作者信息

1. 上海市建筑科学研究院有限公司、上海市工程结构安全重点实验室
2. 中国建筑土木建设有限公司
折叠

摘要

数据清洗是对脏数据进行检测和修复的过程,是进行数据分析应用的前提.对数据缺失、数据重复、数据错误这三种数据噪声的检测技术进行详细阐述,按照数据清洗方式对数据修复技术进行分类概述,包括基于规则的数据清洗算法、基于统计的数据清洗算法和人工智能技术的数据清洗算法,并提出了基于数据中台的数据获取、清洗、服务架构,结合建筑领域数据特征进行了算法适应性分析,可为建筑领域的数据治理和应用提供重要参考.

关键词

数据中台/数据清洗/机器学习/ETL/建筑业

引用本文复制引用

基金项目

上海市社会发展科技攻关项目(22dz1201500)

出版年

2024

信息系统工程

天津市信息中心

信息系统工程

影响因子：0.29

ISSN：1001-2362

参考文献量4

段落导航