首页 > 其他 > 详细

Spark程序打包

时间:2019-11-04 22:16:37      阅读:99      评论:0      收藏:0      [点我收藏+]

背景:

spark程序,使用scala语言开发。整个项目中包含多个子模块,依赖包文件使用maven来管理。

 

打包:

方法一:使用artifacts来

技术分享图片

 

技术分享图片

选择模块,选择对应的主函数:

技术分享图片

 

 点ok保存。

技术分享图片

 

 

由于spark程序部分依赖包服务器上已有,只需要包含几个自定义的jar包即可。因此,需要手工将多余的jar包删除。

最后仅仅保留3个自己指定的依赖包,确定。

技术分享图片

 

从主菜单中build:

技术分享图片

技术分享图片

 

最后生成jar在class\artifacts目录下:

技术分享图片

 

注意点: 如果不是第一次打包,一定使用rebuild,build重复打包有时候更新不成功。

 

Spark程序打包

原文:https://www.cnblogs.com/30go/p/11793016.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!