小男孩▼▲● 2022-08-14 22:22 采纳率: 0%
浏览 167
已结题

Java spark创建线程2万多个,无法回收,

Java spark创建线程2万多个,无法回收,

导致服务器所有的java程序 都无法创建新的线程而停止

代码

img

img

运行结果及报错内容

img

img

初步发现 JavaDStream foreachRDD时 是正常的 主要问题应该是
JavaInputDStream 在flatMap创建的线程没有回收 通过日志打印
在flatMap方法里面 创建的线程名称 Executor task launch worker for task 数在不断增加没有回收

我想要达到的结果

解决 JavaInputDStream 在flatMap创建的线程没有回收 问题
线程池大家都懂, 关键是怎么控制 JavaInputDStream 在flatMap的线程池

  • 写回答

10条回答 默认 最新

  • 「已注销」 2022-08-14 23:34
    关注

    重启

    评论

报告相同问题?

问题事件

  • 系统已结题 8月22日
  • 修改了问题 8月15日
  • 修改了问题 8月15日
  • 修改了问题 8月15日
  • 展开全部