问题遇到的现象和发生背景
hadoop MR如何稳定发压支持几万qps?
具体背景:数据规模常规是亿级别。想了解下通过mr脚本发送http请求,这个请求最长处理时长可能为2000s,如果该请求结果返回body里显示被限流,该请求需要进行重试。有哪些方案达到稳定发几万qps(最多仅能接受上下波动5%,锯齿不能太严重)?
hadoop MR如何稳定发压支持几万qps?
具体背景:数据规模常规是亿级别。想了解下通过mr脚本发送http请求,这个请求最长处理时长可能为2000s,如果该请求结果返回body里显示被限流,该请求需要进行重试。有哪些方案达到稳定发几万qps(最多仅能接受上下波动5%,锯齿不能太严重)?