原文传递
基于Hadoop交通信息并行处理云平台的设计与实现
| 论文题名： | 基于Hadoop交通信息并行处理云平台的设计与实现 |
| 关键词： | 智能交通系统;大数据处理;并行处理云平台;交通信息 |
| 摘要： | 随着社会的发展和城市化的加快，机动车的数量呈现爆炸式的增长。但有限的地理空间和紧缺的土地资源，使得人、车、路之间的交通矛盾日益突出。并且随着计算机网络和信息采集技术的发展，日常需要处理的交通数据也逐步增多。而传统平台在面对大数据问题时显得捉襟见肘，这使得所面临的交通问题越来越严重。 可喜的是，目前出现了许多成熟的大数据处理技术，为智能交通系统的发展带来了新的思路。本文设计的主要出发点是通过将Hadoop、HBase与现有交通云平台进行整合，实现新一代智慧交通云平台，从而增加平台大数据处理的能力，改善现有的交通系统。本文研究的主要内容有： 1. Hadoop、HBase集群多节点部署：本文在基于vSphere所构建的多虚拟节点上搭建Hadoop与HBase集群，作为新一代交通云平台的底层基础。 2.交通基础服务的设计与实现：本文给出了两种交通服务的设计与实现方案，一种是针对原始交通数据所开发的数据中心统一化服务，从而解决数据输入的问题。另一种是为使已有云平台获得大数据处理能力而设计的并行计算和大数据存储服务。 3.交通应用架构设计与案例实现：本文设计的交通应用架构体系体包括交通核心应用和交通智慧应用，其作用是验证新一代交通云平台功能。其中交通核心应用主要功能是基于 MapReduce框架对交通数据做计算与分析，而交通智慧应用是将计算结果以可视化的角度展示给用户。通过应用的成功部署、运行从而可以验证平台整合方案的可行性、正确性。 4. Hadoop、HBase集群与原有交通云平台整合：本文在基于Socket通信方式的基础上，实现了Hadoop、HBase集群与原有云平台功能的整合，使得新一代智慧交通云平台拥有大数据处理的能力。用户通过整合后的平台入口上传并运行应用，从而获取大数据计算和存储能力。 本文提出了通过融合Hadoop、HBase集群构建交通信息并行处理云平台的设计方案，从而解决交通领域大数据的难题。同时在此基础上给出了交通应用架构和服务设计方案，为智能交通系统的发展做出了贡献。 |
| 作者： | 袁亚欣 |
| 专业： | 通信与信息系统 |
| 导师： | 廖丹 |
| 授予学位： | 硕士 |
| 授予学位单位： | 电子科技大学 |
| 学位年度： | 2015 |
| 正文语种： | 中文 |
检索历史
应用推荐
