@songlaf
2016-05-29T04:24:01.000000Z
字数 344
阅读 575
Hadoop
HDFS存在的问题
1)NameNode单点故障
HA,通过主备NameNode来解决.
如果主NameNode发生故障,则切换到备NameNode
2)NameNode压力过大
HDFS Federation(联邦)
水平扩展,支持多个NameNode,
每个NameNode分管一部分目录
所有NameNode共享所有的DateNode存储资源.
MR存在的问题
1)JobTracker访问压力大,影响系统扩张性
2)难以支持MR意外的框架.
Hdaoop1 VS Haddo 2.
Hadoop2.有HDFS,MR和Yran三部分分之构成
.HDFS: NN Federation,HA
.MR运行与Yarn上的MR
.Yarn资源管理系统,每个MR的运行都有Yarn执行,可以充分的利用资源.