Hadoop的工作原理是什么

发布网友发布时间：2022-03-23 00:27

共2个回答

懂视网时间：2022-03-23 04:49

mapreduce工作原理为：MapReduce是一种编程模型，用于大规模数据集的并行运算。MapReduce采用”分而治之”的思想，把对大规模数据集的操作，分发给一个主节点管理下的各个分节点共同完成，然后通过整合各个节点的中间结果，得到最终结果。

　　MapReduce就是”任务的分解与结果的汇总”，它极大地方便了编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。

热心网友时间：2022-03-23 01:57

Hadoop
由许多元素构成。其最底部是
Hadoop
Distributed
File
System(HDFS)，它存储
Hadoop
集群中所有存储节点上的文件。HDFS(对于本文)的上一层是MapRece
引擎，该引擎由
JobTrackers
和
TaskTrackers
组成。通过对Hadoop分布式计算平台最核心的分布式文件系统HDFS、MapRece处理过程，以及数据仓库工具Hive和分布式数据库Hbase的介绍，基本涵盖了Hadoop分布式平台的所有技术核心。

首页

文章

Hadoop的工作原理是什么