首页 > 其他 > 详细

Ubuntu上使用Hadoop 2.x 十二 HDFS Cluster HA QJM和Federation联合使用

时间:2014-03-19 04:41:51      阅读:406      评论:0      收藏:0      [点我收藏+]

扩展性和容错的解决方案

现在已经有了Federation集群,这样就能提供Hadoop大集群的解决方案。不过对于单个namenode server,还是需要HA QJM来提供单点故障的解决方案,使得其可以自动的故障切换。

之前我已经有了两个namenode1和namenode2 server,分别用于管理两个namespace。现在把它们看成active machine, 并clone出两个虚拟机,作为它们的standby machine.

同时QJM需要至少3个JournalNodes,为了省机器,就用datanode1, datanode2和datanode3作为namenode1的JournalNodes. 再创建三个datanode server,同时也作为namenode2的JournalNodes.

架构图:

bubuko.com,布布扣



配置

添3个datanode到federation中

从datanode1中clone出虚拟机,然后复制到另一台物理主机中,安装后,再克隆出2份


更新中...


Ubuntu上使用Hadoop 2.x 十二 HDFS Cluster HA QJM和Federation联合使用,布布扣,bubuko.com

Ubuntu上使用Hadoop 2.x 十二 HDFS Cluster HA QJM和Federation联合使用

原文:http://blog.csdn.net/csfreebird/article/details/21473915

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!