基于动态融合LOF的城市污水处理过程数据清洗方法
CSTR:
作者:
作者单位:

1. 北京工业大学 信息学部,北京 100124;2. 计算智能与智能系统北京市重点实验室,北京 100124;3. 北京城市排水集团有限责任公司,北京 100124;4. 北京北排水环境发展有限公司,北京 100122

作者简介:

通讯作者:

E-mail: rechardhan@bjut.edu.cn.

中图分类号:

TP181

基金项目:

国家自然科学基金重大项目(61890930-5,61622301);国家重点研发计划项目(2018YFC1900800-5);国家自然科学基金创新群体项目(62021003);北京高校卓越青年科学家项目(BJJWZYJH01201910005020).


Data-cleaning method based on dynamic fusion LOF for municipal wastewater treatment process
Author:
Affiliation:

1. Faculty of Information Technology,Beijing University of Technology,Beijing 100124,China;2. Beijing Key Laboratory of Computational Intelligence and Intelligent System,Beijing 100124,China;3. Beijing City Drainage Group Company Limited,Beijing 100124,China;4. Beijing Drainage Water Environment Development Company Limited,Beijing 100022,China

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    围绕城市污水处理过程数据存在连续噪声和缺失的问题,提出一种基于动态融合局部异常因子(dynamic fusion local outlier factor,DFLOF)的污水处理过程数据清洗方法.首先,设计一种基于滑动窗口的数据动态分段方法,通过计算每个子段数据的均值、最大值和峰值区间信息获得数据异常属性值;其次,建立一种基于DFLOF的数据可信度评价模型,利用基于动态融合局部异常因子算法评估数据的可信度,保证异常数据检测和剔除的准确率;最后,提出一种基于径向基函数(radial basis function,RBF)神经网络的数据补偿方法对缺失数据进行补偿,实现污水处理过程数据的清洗.将该数据清洗方法应用于实际污水处理过程,实验结果表明:基于动态融合局部异常因子的数据清洗方法能够实现污水处理过程中异常数据的清洗,从而提高数据质量.

    Abstract:

    In order to reduce the impact of continuous data noise and loss, a dynamic fusion local outlier factor(DFLOF) method is proposed for data-cleaning of the municipal wastewater treatment process(WWTP). First, a data dynamic segmentation method based on sliding window is designed to obtain the abnormal attribute of each segment, including mean value, maximum value and peak interval. Then, a data reliability evaluation model based on the DFLOF is established to evaluate each data segment by using the dynamic fusion local outlier factor algorithm, which improves the accuracy of abnormal data detection and elimination. Finally, a data compensation method based on radial basis function neural network is proposed to compensate the missing data and further realize the data-cleaning of the WWTP. The proposed cleaning method is applied to a real WWTP, the experimental results show that the data-cleaning method based on the dynamic fusion local outlier factor is able to clear abnormal data and improve the data quality.

    参考文献
    相似文献
    引证文献
引用本文

鲁树武,伍小龙,郑江,等.基于动态融合LOF的城市污水处理过程数据清洗方法[J].控制与决策,2022,37(5):1231-1240

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2022-03-30
  • 出版日期: 2022-05-20
文章二维码