原文传递
基于Spark平台的海量AIS数据k-means算法聚类分析
| 题名： | 基于Spark平台的海量AIS数据k-means算法聚类分析 |
| 作者： | 初秀民;林宏;王志远 |
| 作者单位： | 闽江学院物理与电子信息工程学院;闽江学院福建省船舶智能航行安全控制工程研究中心;闽江学院海洋智能船舶装备福建省高校工程研究中心 |
| 关键词： | AIS;Spark;Hadoop;k-means聚类 |
| 摘要： | 随着船舶数量不断增加,AIS数据的数量持续增长,与此同时数据复杂和处理难度大等缺陷也日渐突出。为了分析大量的AIS数据并充分挖掘有效信息，文中构建了一个基于Spark.Hadoop和Mesos的AIS数据处理和分析平台,使用k-means算法对船舶数据进行聚类分析,获得更清晰的船舶航迹信息,并比较有、无安装Spark程序的计算机进行聚类分析时所需的时间。从实验结果看出,与非大数据平台相比,Spark集群中AIS船舶数据点的聚类分析速度大大提高。 |
| 期刊名称： | 交通科技 |
| 出版日期： | 202106 |
| 出版年： | 2021 |
| 期： | 03 |
| 页码： | 138-141 |
检索历史
应用推荐
