数据质量概述¶
数据已经成为互联网企业非常依赖的新型重要资产。数据的质量直接关系到信息的精准度,也影响到企业的生存和竞争力。
数据质量管理是测度、提高和验证质量,以及整合组织数据的一套处理准则。而物联网数据体量大、速度快和多样性的特点,决定了物联网大数据质量所需的处理,有别于传统数据治理计划的质量管理方式。
数据质量评估维度¶
目前EnOS支持的数据质量评估维度如下:
完备性(Completeness)
数据是完整不缺失的,例如人员信息完整涵盖性别、年龄,当日测点数据完全到达等。
准确性(Accuracy)
数据是准确合理的,例如年龄在合理范围内。
及时性(Timeliness)
数据的上送是否及时,是否有延迟。
对数据质量维度的详细介绍以及查看数据质量报告,请参考 数据质量管理。
产品优势¶
多维度数据质量评估
可视化质量报表查询
使用限制¶
数据质量规则是通过在流数据处理任务中配置相关Stage来设置的。