hadoop的架构模型

hadoop的架构模型

1.x的版本架构模型介绍

文件系统核心模块：
NameNode: 集群当中的主节点，管理元数据（文件的大小，文件的位置，文件的权限），主要用于管理集群当中的各种数据
seconddaryNameNode: 主要能用于hadoop当中元数据信息的辅助管理
DataNode: 集群当中的从节点，主要用于存储集群当中的各种数据
数据计算核心模块：
JobTracker:接受用户的计算请求任务，并分配任务给从节点
TaskTracker: 负责执行主节点JobTracker分配的任务

2.x的版本架构模型介绍
第一种：NameNode与ResourceManager单节点架构模型

![在这里插入图片描述](https://img-blog.csdnimg.cn/20200216140724375.png?x-oss-
文件系统核心模块：
NameNode：集群当中的主节点，主要用于管理集群当中的各种数据
seconddaryNameNode:主要能用于hadoop当中元数据信息的辅助管理
DataNode:集群当中的从节点，主要用于存储集群当中的各种数据
数据计算核心模块：
ResourceManager: 接受用户的计算请求任务，并负责集群的资源分配
NodeManager: 负责执行主节点APPmaster分配的任务
第二种：NameNode与ResourceManager高可用架构模型：

文件系统核心模块：
NameNode: 集群当中的主节点，主要用于管理集群当中的各种数据，一般都是使用两个，实现HA高可用
JournalNode: 元数据信息管理进程，一般都是奇数个
DataNode:从节点，用于数据的存储
数据计算核心模块：
ResourceManager:Yarn平台的主节点，主要用于接收各种任务，通过两个，构建高可用
NodeManager:Yarn平台的从节点，主要用于处理ResourceManager分配的任务