首页 > 其他 > 详细

关于Spark下的standalone模式的搭建

时间:2017-02-07 12:00:56      阅读:228      评论:0      收藏:0      [点我收藏+]

1.介绍standalone

  Standalone模式是Spark自身管理资源的一个模式,类似Yarn
  Yarn的结构:
    ResourceManager: 负责集群资源的管理
    NodeManager:负责当前机器的资源管理
    CPU&内存
  Spark的Standalone的结构:
    Master: 负责集群资源管理
    Worker: 负责当前机器的资源管理
    CPU&内存

 

2.在local得基础上搭建standalone

 

3.修改env.sh

  技术分享

 

4.修改slave

  技术分享

 

5.启动

  

 

 

 

 

 

 

 

 

 

 

 

  

 

关于Spark下的standalone模式的搭建

原文:http://www.cnblogs.com/juncaoit/p/6373250.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!