使用flink消费kafka和使用springboot的消费有什么区别,为什么说流式计算快,他在哪些方面节省了时间
1条回答 默认 最新
- kakaccys 2022-08-13 08:07关注
主要是大数据情况下,有大量吞吐,大量计算,比如像很多电商网站都需要实时推荐算法工作,或者你去某网站时,突然砸你个劵,你看某个内容时,关联其他内容,广告,这种情况下都需要流式计算。
flink说白了就是一个分布式内存管理平台,为什么和kafka队列配合呢?还是因为内存,内存要爆了,就会导致一个服务器挂掉,flink除分配任务内存外,还可以动态扩容,容灾,至于消费方式当然是先进先出,这种情况只要有足够多的机器,足够多的内存,就能服务好用户。
当然既然是队列,也会存在队列过长的问题,所以像要给用户及时反馈的实时计算,可能就不适用了,比如用户登录,如果等的过长也不好。
至于节省时间,还是内存,内存学过计算机组成原理都知道算是速度的顶流了,还有就是并行计算,因为有分布式,这样对大量用户信息可以实现快速并行计算,还有些模型,其本身也会线上迭代,所以也需要流式计算。解决 无用评论 打赏 举报
悬赏问题
- ¥15 用windows做服务的同志有吗
- ¥60 求一个简单的网页(标签-安全|关键词-上传)
- ¥35 lstm时间序列共享单车预测,loss值优化,参数优化算法
- ¥15 Python中的request,如何使用ssr节点,通过代理requests网页。本人在泰国,需要用大陆ip才能玩网页游戏,合法合规。
- ¥100 为什么这个恒流源电路不能恒流?
- ¥15 有偿求跨组件数据流路径图
- ¥15 写一个方法checkPerson,入参实体类Person,出参布尔值
- ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题,上传的坐标文件里是怎么对无序点进行编号的,以及xy坐标在处理的时候是进行整体模型分片处理的吗
- ¥15 一直显示正在等待HID—ISP
- ¥15 Python turtle 画图