phantomsee 2021-09-03 14:01 采纳率: 50%
浏览 45
已结题

如何设计任务处理逻辑,不同种任务允许并发,同一种任务不允许并发

#问题描述
我想做一个任务处理平台,用来处理任务。用户通过HTTP接口并发提交任务。
任务包含对象id、任务详情。对于任意两个任务,如果对象id不同,则允许并发处理;如果对象id相同,则需要按提交时间串行处理。
如何设计任务处理逻辑?
#我的初步想法
使用消息队列和锁来控制任务处理,但是具体的逻辑总是想不好,希望大家帮忙出出主意

  • 写回答

3条回答 默认 最新

  • 於黾 2021-09-03 14:10
    关注

    如果你的ID数量是有限的,并且都对应着不同的函数来处理,那么加锁是可行的
    如果你的ID与要执行的函数没有必然关系,或者ID数量是不可预见的,那么单纯加锁是没法实现的。

    你应该参考网站本身的设计,先把所有的ID丢进一个字典里,这样能保证不重复,然后给每个ID分配一个处理队列
    当有新消息到来时,丢进对应的消息队列里去,而不是统一丢进一个队列里再处理,那样不管你怎么搞总是在逻辑上行不通的。
    比如你前3个消息都是不同ID,那么你开了3个线程(或者线程池)来处理,第4个ID与之前的重复,那么这个消息该往哪里缓存?直接执行肯定不行,可是如果等待就会阻塞后面所有的消息。
    所以,一开始就把不同ID的消息分开来存放是你唯一的选择。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题?

问题事件

  • 系统已结题 10月15日
  • 已采纳回答 10月7日
  • 创建了问题 9月3日

悬赏问题

  • ¥15 如何在scanpy上做差异基因和通路富集?
  • ¥20 关于#硬件工程#的问题,请各位专家解答!
  • ¥15 关于#matlab#的问题:期望的系统闭环传递函数为G(s)=wn^2/s^2+2¢wn+wn^2阻尼系数¢=0.707,使系统具有较小的超调量
  • ¥15 FLUENT如何实现在堆积颗粒的上表面加载高斯热源
  • ¥30 截图中的mathematics程序转换成matlab
  • ¥15 动力学代码报错,维度不匹配
  • ¥15 Power query添加列问题
  • ¥50 Kubernetes&Fission&Eleasticsearch
  • ¥15 報錯:Person is not mapped,如何解決?
  • ¥15 c++头文件不能识别CDialog