m0_54102886 2021-05-15 20:41 采纳率: 50%
浏览 255
已结题

如何设置最小的num-executors,公式如何得出,使这个程序正好能运行?

spark版本:2.1.0

executor-memory:6g

executor-cores:2

dirver-memory:4g

堆外内存:1g

其余都是默认参数

如何根据图sparkui的input或shuffle read或写出公式计算出num-executors最小值

 

  • 写回答

3条回答 默认 最新

  • qq_36931569 2021-05-19 20:01
    关注

    私聊

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题?

悬赏问题

  • ¥15 delphi webbrowser组件网页下拉菜单自动选择问题
  • ¥15 linux驱动,linux应用,多线程
  • ¥20 我要一个分身加定位两个功能的安卓app
  • ¥15 基于FOC驱动器,如何实现卡丁车下坡无阻力的遛坡的效果
  • ¥15 IAR程序莫名变量多重定义
  • ¥15 (标签-UDP|关键词-client)
  • ¥15 关于库卡officelite无法与虚拟机通讯的问题
  • ¥15 目标检测项目无法读取视频
  • ¥15 GEO datasets中基因芯片数据仅仅提供了normalized signal如何进行差异分析
  • ¥100 求采集电商背景音乐的方法