如何 使用akk-http 提供spark 服务?

Question

大概代码如下
object SparkServer extends App with SparkServices {
implicit val system = ActorSystem("spark-akka-http")
implicit val materializer = ActorMaterializer()
implicit val executionContext = system.dispatcher
val bindingFuture = Http().bindAndHandle(route, "192.168.xx.xx", 8001)
}
SparkServices 基础代码如下
val sparkConf = new SparkConf().setMaster("local[8]")
val sparkSession = SparkSession.builder
.appName("SpanMsgServer")
.config(sparkConf)
.enableHiveSupport()
.getOrCreate()
......
使用 spark-submit 提交的时候 报错
com.typesafe.config.ConfigException$Missing: No configuration setting found for key akka.stream
google 一下 pom 里面添加 如下

reference.conf

错误依旧， 没法在resources 目录下面添加
http://doc.akka.io/docs/akka-stream-and-http-experimental/1.0-M2/stream-configuration.html 下面的akka.stream 配置文件
出现新错误
comes com.typesafe.config.ConfigException$Missing: No configuration setting found for key debug-logging
怎么解决？ 求大神指导下

Answer 1

在resources下面添加一个application.conf文件，把akka.stream的配置以key-value的方式添加进去