首页 > 其他 > 详细

spark运行模式

时间：2017-05-06 00:04:25 阅读：285 评论：0 收藏：0 [点我收藏+]

Spark有以下四种运行模式：

local：本地单进程模式，用于本地开发测试Spark代码;
standalone：分布式集群模式，Master-Worker架构，Master负责调度，Worker负责具体Task的执行;
on yarn/mesos：运行在yarn/mesos等资源管理框架之上，yarn/mesos提供资源管理，spark提供计算调度，并可与其他计算框架(如MapReduce/MPI/Storm)共同运行在同一个集群之上;
on cloud(EC2)：运行在AWS的EC2之上

可以参考：http://www.36dsj.com/archives/8001和http://www.ituring.com.cn/tupubarticle/5373

spark运行模式

原文：http://www.cnblogs.com/moonandstar08/p/6815307.html

踩

(0)

赞

(0)

举报

评论一句话评论（0）

分享档案

更多>

2021年09月23日 (328)
2021年09月24日 (313)
2021年09月17日 (191)
2021年09月15日 (369)
2021年09月16日 (411)
2021年09月13日 (439)
2021年09月11日 (398)
2021年09月12日 (393)
2021年09月10日 (160)
2021年09月08日 (222)

最新文章

更多>

教程昨日排行

更多>

友情链接

汇智网 PHP教程插件网

关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com

© 2014 bubuko.com 版权所有

打开技术之扣，分享程序人生！