原文传递
基于Hadoop的交通物流数据仓库构建技术研究
| 题名： | 基于Hadoop的交通物流数据仓库构建技术研究 |
| 正文语种： | 中文 |
| 作者： | 赵继新； |
| 作者单位： | 广西交通职业技术学院管理系； |
| 关键词： | 交通物流数据；数据仓库；Hadoop |
| 摘要： | 随着社会经济的高速发展,交通物流行业对交通数据存储、管理和分析的要求越来越高。文章在对比Hadoop与MPP等技术的基础上,基于对MapReduce并行计算、HDFS分布式文件系统、数仓工具Hive和Sqoop采集组件等架构的分析,研究了Hadoop交通物流数据仓库的构建技术,建设了交通物流数据仓库,实现了海量交通物流数据文件的元数据管理、分布式存储和交通物流数据查询。经测试验证:利用交通物流数据仓库进行大型交通物流数据文件的存储和操作时,能有效提高数据吞吐率及其读写效率。 |
| 期刊名称： | 西部交通科技 |
| 出版年： | 2019 |
| 期： | 10 |
| 页码： | 162-165 |
检索历史
应用推荐
