首页 > 移动平台 > 详细

spark内核揭秘-11-Driver中AppClient源码分析

时间:2015-01-22 02:08:00      阅读:283      评论:0      收藏:0      [点我收藏+]

首先从SparkContext中TaskScheduler实例的创建开始:

bubuko.com,布布扣

进入taskScheduler.start()方法内部:

bubuko.com,布布扣

进入其实现者TaskSchedulerImpl内部:

bubuko.com,布布扣

?

可以发现在start具体实现的内部首先是有个backend.start方法:

bubuko.com,布布扣

其最终具体的实现类为:

bubuko.com,布布扣

bubuko.com,布布扣

bubuko.com,布布扣

bubuko.com,布布扣

从代码中可以看出,我们把CoarseGrainedExecutorBackend封装成command,然后交给appDesc,接着交给了Appclient,此时的AppClient就是客户端程序!

AppClient会调用start方法:

bubuko.com,布布扣

此时启动了ClientActor:

bubuko.com,布布扣

bubuko.com,布布扣

bubuko.com,布布扣

关于AppClient的代码,在我之前的博客文章已经分析了,此处俺就不分析了

下一篇要分析registerWithMaster() 和 tryRegisterAllMasters()方法

spark内核揭秘-11-Driver中AppClient源码分析

原文:http://stark-summer.iteye.com/blog/2178179

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!