Hadoop群集具体来说包含两个集群:HDFS群集和YARN集群,两者逻辑上分离,但物理上常在一起。
(1)HDFS群集:负责海量数据的储存,集群中的角色主要有NameNode/DataNode/SecondaryNameNode.
(2)MapReduce:他其实就是一个应用程序开发包。
(3)YARN集群:负责海量数据运算时的资源调度。集群中的角色主要有:ResourManager/NodeManager
Hadoop群集具体来说包含两个集群:HDFS群集和YARN集群,两者逻辑上分离,但物理上常在一起。
(1)HDFS群集:负责海量数据的储存,集群中的角色主要有NameNode/DataNode/SecondaryNameNode.
(2)MapReduce:他其实就是一个应用程序开发包。
(3)YARN集群:负责海量数据运算时的资源调度。集群中的角色主要有:ResourManager/NodeManager