基于Hadoop的备件储备定额并行化研究
业言较方便⑵ 数据进行整编制频数表⑶ 计算平均消耗量2.1 Hadoop平台简介Hadoop个Apache软件基金会开发开源分布式云计算平台大数据存储分布式处能力显著Hadoop成包含许多项目集合核心包括Hadoop分布式文件系统Hadoop Distributed File SystemHDFSMapReduce分布式计算模型Google MapReduce开源实现Hadoop分布式基础架构底层细节用户来说透明HDFS高容错高伸缩等特性使得用户廉价低配硬件上部署Hadoop成能MapReduce分布式编程模型使开发行应用程序更加简单开发者解分布式系统底层细节用户利用Hadoop方便架构资源搭建自己工作集群充分利用搭建集群计算存储能力解决海量数据存储运算问题[4]Hadoop分布式存储分布式计算方面着非凡能力2.2 概率统计分析法MapReduce化分析设计根据MapReduce计算框架大致分两个阶段Map阶段Reduce阶段Map阶段需处输入数据会被MapReduce框架提供函数InputFormat分割成大小定片段SplitsMapReduce计算框架会根据被分割分块数量来创建等量Map任务时将每个Splits片段进步分解形式键值作Map函数输入参数然后用户自己定义Map
<<上一页 下一页>>
广州市越秀区图书馆版权所有。
联系电话：020-87673002
本站访问人数：