题名: | 交通大数据质量控制架构与清洗方法 |
作者: | 席加熠 1 詹璐 2 沈凯龙 3 沈湘萍 2 |
作者单位: | 1. 中交信捷科技有限公司2. 北京北大千方科技有限公司3. 天翼云科技有限公司 |
关键词: | 关键词:智能交通;数据质量;校验规则;清洗方法; |
摘要: | 摘要:针对综合交通运输大数据中心数据质量不足、难以支撑应用的问题,基于ISACA数据治理思想提出交通数据质量控制架构与清洗治理方法,从规范性、完整性、一致性、准确性、时效性和可访问性六个维度明确数据质量校验规则,给出人工与自动化结合的数据清洗方法论。经成都市的轨道交通刷卡数据验证,共识别出刷卡数据表中票卡类型不规范、数据传输不及时等11项数据质量问题,并通过技术与管理双重手段校正90.9%的数据质量问题,后续传入的数据均符合要求。 |
期刊名称: | 黑龙江交通科技 |
出版日期: | 202401 |
出版年: | 2024 |
期: | 5 |