首页 > Windows开发 > 详细

Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-01

时间:2015-02-10 13:18:15      阅读:323      评论:0      收藏:0      [点我收藏+]

创建一个Scala IDEA工程:

技术分享

点击“Next”:

技术分享

点击“Finish”完成工程的创建:

技术分享

修改项目的属性:

技术分享


首先修改Modules选项:

技术分享


在src下创建两个文件夹,并把其属性改为source:

技术分享

再修改Libraries:

技术分享

因为要开发Spark程序,所以需要把Spark的开发需要的jar包导进来:

技术分享


导入包完成后,在工程的scala下面创建一个package:

技术分享


创建一个Object对象:

技术分享

完成初始类的创建:

技术分享


首先构建Spark Driver的模板代码:

技术分享

该程序是对前面的搜狗日志的处理代码,只不过这个时候在IDEA中编写而已。

Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-01

原文:http://blog.csdn.net/stark_summer/article/details/43058291

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!