Springboot集成kafka,一段时间后(大概10小时左右)应用变得很卡,消费很慢。
体现为:
1.该应用的接口响应速度很慢(10s左右,应用启动越久越慢)
2.kafka中有大量消息堆积。处理逻辑非常简单(收到数据后,更新数据库,然后通过websocket推送到前端页面,数据频率3s一次。)正常来说这种数据量不应该导致消息堆积的(10小时大概堆积10W+)
3.应用重启后恢复正常,消费速度变的正常,迅速消费完堆积的消息。接口响应速度正常
已做的处理:
1.之前topic的partition为1,现扩展为2.(broker为2,固定不变)
2.消费者使用的是@KafkaListener,没有设定concurrency值(不太清楚该值效果,应用只启了一个实例,不知道有没有用)
处理之后情况并没有得到好转。应用日志并没有打印报错,感觉像是哪里卡住了,但日志没有反应看不出来。
请教各位有无优化建议,而且想不明白是什么原因导致的应用接口变慢(查询接口,表中只有几条数据)