智能航运数据处理的分布式弹性计算技术研究与应用
要处理少量计算(主要是再一次检验的计算量)即可完成数据整合。完成整合后的数据在中心节点落地,交由中心节点作进一步的分析处理。船联网在整合数据的基础上提供全局性的数据服务支持,比如跨区域的数据服务。2.1.3 节点间的数据传输机制船联网节点间的数据传输将只在中心节点和分节点之间进行,分节点之间相互隔离。中心节点定期轮询各个省级分节点,将船舶基本信息等主数据采集上来(分节点提供相应的数据库接口),并监控各分节点的运行状态。各个省级分节点通过消息服务,定期将签证、感知信息等动态实时数据推送给中心节点。2.2 中心分布式框架计算模型船联网中心节点分布式框架计算模型使用目前较为成熟的MapReduce计算模型。目前世界上最快的1TB排序记录就是由基于MapReduce实现的。MapReduce将计算任务划分为map和reduce两个阶段。map阶段负责“分”,即把复杂的任务分解为若干个“简单的任务”执行。“简单的任务”有以下几个含义:⑴ 数据或计算规模相对于原任务要大
<<上一页 下一页>>
广州市越秀区图书馆版权所有。
联系电话:020-87673002
本站访问人数: