云环境下的一种并行任务划分方法研究
,让每个作业队列面对一个自治的节点区域,该种处理方式能够结合作业大小的划分,体现出高性能节点处理复杂任务,低性能节点处理简单任务的优势。⑶ 划分完地震资料数据后,可采用基于HDFS的共享分布式存储方式,通过这种方式,所有子任务的数据都通过NameNode集中式管理,在具体的任务执行开始,作业服务器会初始的数据进行按队列与资源节点匹配程度分发,将要处理的任务分配到数据存在的节点执行,这样在任务执行过程可以减少网络通信要求,任务结束后再从各处理结点返回处理结果到共享存储结点,进行结果的合并处理。这种存储方式能够显著提高处理海量数据时系统的整体效率。2 任务划分策略由于地震数据资料具有粗粒度、松耦合的并行化特点,数据之间联系较少,因此不适合用基于图划分工具的任务划分方法[9],并且云计算环境的广域性和动态性决定了任务划分要受到诸多因素的影响,对于可分任务,对其分解策略要视环境而定。根据资源的负载能力进行合理的划分,如果
<<上一页 下一页>>
广州市越秀区图书馆版权所有。
联系电话:020-87673002
本站访问人数: