当任务执行队列非常大时,可能是什么策略?

时间:2015-12-18 11:58:28

标签: c# multithreading concurrency concurrent-queue

ConcurrentQueue TasksCollection包含ITask个对象。它不是。Task类.Net框架。

public class TaskRunner:IDisposable
  {
    private Task _orderTask;

   public TaskRunner()
     {
      TasksCollection = new ConcurrentQueue<ITask>();   
     }

   public void Start()
    {
        _needToStopOrderTask = false;            
        _orderTask = Task.Factory.StartNew(() => OrderTaskLoop());
    }

   public void Stop()
    {
        lock(_lockObject)
            _needToStopOrderTask = true;      
    }
}

因此,当某些事件发生时,我创建ITask并添加到ConcurrentQueue新任务。 在线程循环中,我得到每个任务并执行它(同步并一致地执行一些代码。似乎,我不能并发它。

private void OrderTaskLoop()
    {
        try
        {
            if (TasksCollection.Count == 0)
                return;

            while (!_needToStopOrderTask)
            {                    
                if(TasksCollection.Count>100)//too many tasks
                {
                      //what should i do here?
                }

                ITask task = null;
                var tryTake = TasksCollection.TryDequeue(out task);
                ///execute
           }
    }
}

所以,在我的情况下,我认为我可以清除队列并继续工作,因为我的跑步者在实时环境中工作。但是,这种情况可能存在一些模式吗? 如果ConcurrentQueue数太大,我该怎么办?

谢谢!

1 个答案:

答案 0 :(得分:1)

实际上,只要任务到达的速度比处理速度快,我可以建议一些选项:

  1. 忽略一些任务。
    a)例如停止添加新任务(如@Mikael Nitell在评论中建议) b)或者只是清理队列(就像你自己建议的那样)
    c)为任务引入超时。任务超时时可能会被删除。可以对不同类型的任务使用不同的超时。如果这适合你。

  2. 更快地处理任务以避免队列长度增长 a)审查任务处理并找到减少处理时间的方法 b)找到如何并行运行任务处理的方法。如果任务可以完全平行,它们可能部分并行。

  3. 如果事件的负载不规则,则可能允许更大的队列长度 当事件集中到达时 - 正在收集任务并且队列长度正在增加 当事件没有到达或缓慢到达时 - 队列长度正在减少,因为任务的处理速度比到达时要快。

  4. 最合适的选择取决于具体情况和项目需求 也可以考虑这些选项的组合。