spark程序使用scalac先编译再使用scala运行和打成jar包使用spark-submit提交运行有什么区别?

第一种方式:先使用scalac命令 编译,再使用scala命令运行

第二种方式:先使用sbt打包,然后再使用spark-submit提交运行spark

这两种方式有什么区别?各有什么优劣势?先谢谢大家了 ~

1个回答

Csdn user default icon
上传中...
上传图片
插入图片
抄袭、复制答案,以达到刷声望分或其他目的的行为,在CSDN问答是严格禁止的,一经发现立刻封号。是时候展现真正的技术了!

相似问题

1
spark(scala) 以空格进行分割,忽略引号内的空格
0
spark任务spark-submit集群运行报错。
1
spark提交任务 cassadra报错,guava版本低于16。0.1,但是检查jar包是19.0的spark本地local模式跑没问题
0
在kerberos环境下使用spark2访问hive报错
1
IDEA 2018.2 使用gradle 构建, java + scala 的项目, 编译不通过,无法运行
0
利用DOS系统功能调用编写汇编程序,在屏幕上显示自己学号的后4个数字符号
1
请问使用spark的时候,如果使用高性能64核高内存的阿里云服务器,用哪种模式运行比较好?
0
IDEA scala程序代码如何调用python matplotlib程序啊。。。想要执行scala代码直接出来柱状图。
1
运行 sbt 时报错,是什么问题?
1
spark structured streaming实现每30秒计算前30分钟的用户增长率
1
如何用Scala接收Java_Restful发送的数据?
0
spark在yarn集群上执行client模式代码
3
Error while instantiating 'org.apache.spark.sql.hive.HiveSessionState'
1
spark 读取不到hive metastore 获取不到数据库
1
spark:在reduceByKey中,怎么获取到key的值
1
scala的toMap一个坑,不能理解
1
spring boot 集成spark 初始化spark context 报错,"datanucleus" yet this has not been found
1
twincat安装没有问题,但是运行system manager和PLCcontrol后,等一会电脑就卡死但是不蓝屏?
1
twincat安装没有问题,但是运行system manager和PLCcontrol后,等一会电脑就卡死但是不蓝屏
1
flink搭建standalone模式集群,jobmanager会自动挂掉,只有一直刷的warn日志