当前位置: 首页> 学位论文 >详情
原文传递 面向大数据应用的铁路主数据管理关键技术研究
论文题名: 面向大数据应用的铁路主数据管理关键技术研究
关键词: 铁路信息化;主数据管理;大数据;软件设计;功能模块
摘要: 随着大数据时代的来临,以及大数据技术应用的愈加广泛,数据已经变成企业的重要资产之一。通过对数据的分析挖掘及应用,可以有效提升企业的管理水平及经济效益。在铁路运输领域,通过近四十年的铁路信息化建设,中国铁路总公司已经建成了大量的业务信息系统,并积累了海量的PB级规模数据,为大数据在铁路行业的应用奠定了坚实的数据基础。但由于铁路信息系统建设初期对主数据管理的概念薄弱,各业务系统独立建设、分散维护,造成铁路基础数据标准不统一、编码不统一、含义不一致,给数据共享和数据关联分析带来极大困难。特别是进入大数据分析时代,对数据质量提出了更高要求。因此,通过建设铁路主数据管理平台实现对铁路主数据的规范及高效管理,对提升铁路数据质量、促进大数据技术在铁路行业的广泛应用具有重要意义。本文主要的研究内容如下:
  (1)提出了铁路主数据的定义、特点及内涵,在分析铁路主数据管理需求的基础上,设计了铁路主数据管理平台的总体架构,分别从主数据集成、存储、治理、发布等方面对平台的功能架构进行了设计,并对基于信息分类法建立的铁路主数据管理数据架构进行阐述。
  (2)针对从多源异构异域复杂业务系统中识别铁路主数据的需求,本文提出了基于模糊层次分析法的铁路主数据识别模型,并应用知识图谱技术对铁路主数据进行了建模。
  (3)设计了铁路主数据管理的全生命周期模型,并对铁路主数据维护流程进行阐述,分别从主数据的集成、存储及发布等方面进行创新,提出了基于模板的数据清洗及导入、基于WebService的数据接入、铁路主数据属性动态映射、大数据量文件共享、基于时间戳的数据版本管理及追溯等关键技术。
  (4)以大数据应用为目的,研究提出了基于主数据标准进行数据采集和数据治理的方法。阐述了基于铁路数据服务平台的数据采集实现,并在大数据治理中应用铁路主数据标准对业务数据进行清洗,有效提升了铁路数据服务平台的数据质量。
  (5)研发实现了铁路主数据管理平台的核心功能,对总体架构、关键技术等进行了验证,并介绍了铁路主数据管理平台的应用效果。
作者: 刘艺飞
专业: 交通信息工程及控制
导师: 李平
授予学位: 硕士
授予学位单位: 中国铁道科学研究院
学位年度: 2018
正文语种: 中文
检索历史
应用推荐