智能航运数据处理的分布式弹性计算技术研究与应用
据的内在价值，需要对这些业务数据进行统计分析和数据挖掘，如预测建模、关联分析、数据聚类、异常检测等。进行海量航运数据挖掘分析时，两级分布式计算框架通过全局分布式保证了挖掘模型样本的数据质量，然后在中心分布式框架上完成挖掘分析计算。在中心分布式框架上可以结合mahout、R等挖掘分析软件，更快速地完成分析模型的构建。5 结束语两级分布式计算平台的设计体系可以在满足当前智能航运数据处理要求的情况下，充分考虑到今后航运信息化发展中数据爆炸性增长时的计算扩展要求。虽然在初期，整个分布式计算平台的建设需要一定的投入（涉及多个省市以及中心节点的建设），但由于具备良好的线性扩展能力，今后的集群扩展成本将非常可控：平台不需要更换升级，只要不断增加节点，即可以提供不断增长的计算能力。随着具体计算需求的落地和实现，智能航运分布式计算平台将充分挖掘航运数据中的价值，为航运业务应用提供更好的数据支撑和运算服务。参考文献：[1] L
<<上一页 下一页>>
广州市越秀区图书馆版权所有。
联系电话：020-87673002
本站访问人数：