m0_54102886 2021-05-15 20:41 采纳率: 50%
浏览 254
已结题

如何设置最小的num-executors,公式如何得出,使这个程序正好能运行?

spark版本:2.1.0

executor-memory:6g

executor-cores:2

dirver-memory:4g

堆外内存:1g

其余都是默认参数

如何根据图sparkui的input或shuffle read或写出公式计算出num-executors最小值

 

  • 写回答

3条回答 默认 最新

  • qq_36931569 2021-05-19 20:01
    关注

    私聊

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题?

悬赏问题

  • ¥15 请问下这个红框里面是什么文档或者记事本编辑器
  • ¥15 机器学习教材中的例题询问
  • ¥15 求.net core 几款免费的pdf编辑器
  • ¥15 C# P/Invoke的效率问题
  • ¥20 thinkphp适配人大金仓问题
  • ¥20 Oracle替换.dbf文件后无法连接,如何解决?(相关搜索:数据库|死循环)
  • ¥15 数据库数据成问号了,前台查询正常,数据库查询是?号
  • ¥15 算法使用了tf-idf,用手肘图确定k值确定不了,第四轮廓系数又太小才有0.006088746097507285,如何解决?(相关搜索:数据处理)
  • ¥15 彩灯控制电路,会的加我QQ1482956179
  • ¥200 相机拍直接转存到电脑上 立拍立穿无线局域网传