高可用Hadoop大数据平台部署实战

一、高可用hadoop2.x体系结构

Hadoop1.x的核心组成是两部分,即HDFS和MapReduce。在Hadoop2中变为HDFS和Yarn。新的HDFS中的NameNode不再是只有一个了,可以有多个。每一个都有相同的职能。

1、两个NameNode的地位如何

双Namenode高可用Hadoop集群架构:

一个是active状态的,一个是standby状态的。当集群运行时,只有active状态的NameNode是正常工作的,standby状态的NameNode是处于待命状态的,时刻同步active状态NameNode的数据。一旦active状态的NameNode不能工作,通过手工或者自动切换,standby状态的NameNode就可以转变为active状态的,就可以继续工作了。这就是高可靠。

Hadoop1.x HDFS架构:

猜你喜欢

转载自blog.csdn.net/qq_35029061/article/details/132252431