首页 > 其他 > 详细

spark配置(6)-独立应用程序

时间:2016-06-25 08:27:05      阅读:263      评论:0      收藏:0      [点我收藏+]
  1. cd sparkapp/
  2. ls
  3. find .
  4. /usr/local/sbt/sbt package


技术分享

package完成:

技术分享


  1. hadoop@Athena:~/sparkapp$ ls
  2. project  simple.sbt  src  target

打包位置:

技术分享

我们就可以将生成的 jar 包通过 spark-submit 提交到 Spark 中运行:

  1. /usr/local/spark/bin/spark-submit --class "SimpleApp" ~/sparkapp/target/scala-2.10/simple-project_2.10-1.0.jar


  1. /usr/local/spark/bin/spark-submit --class "SimpleApp" ~/sparkapp/target/scala-2.10/simple-project_2.10-1.0.jar 2>&1 | grep "Lines with a:"
  2. //精简信息查看运行结果。



参考/转载:http://www.powerxing.com/spark-quick-start-guide/ 






spark配置(6)-独立应用程序

原文:http://www.cnblogs.com/iathena/p/5615746.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!