Question

我正在测试我正在构建的Webjob的Poison消息处理。

除了一件奇怪的事情外，一切似乎都在按预期工作：

当消息移动到“-poison”队列时，其鬼影似乎在主作业队列中保持隐藏（不可见）。这意味着如果我将6个有害消息移动到“-poison”队列，则存储资源管理器显示“显示队列中的6个消息中的0个”。我无法在存储资源管理器中看到6条隐藏的消息。

我试图删除作业队列并重新创建它，但是在我运行测试后仍然会发生奇怪的问题。存储资源管理器显示“在队列中显示6条消息中的0条”。

幕后发生了什么？

更新1

我做了一些调查，我认为WebJob SDK不会删除有害信息。

我浏览了WebJob SDK源代码，我认为这行代码由于某种原因没有被执行：

https://github.com/Azure/azure-webjobs-sdk/blob/dev/src/Microsoft.Azure.WebJobs.Host/Queues/QueueProcessor.cs#L119

这是我的功能，可以帮助复制问题：

public class Functions
{
    public static void ProcessQueueMessage([QueueTrigger("%QueueName%")] string message, TextWriter log)
    {
        if (message.Contains("Break"))
        {
            throw new Exception($"Error while processing message {message}");
        }

        log.WriteLine($"Processed message {message}");
    }

}

更新2

这是我正在使用的WebJob SDK：

Answer 1

据我所知，azure存储SDK 8. +与Azure webjobs SDK2.0（related issue）不兼容。

如果您使用存储SDK 8. +有害消息保持未删除但不可见。

解决方法方法是使用低天蓝色存储SDK 7.2.1。

它会很好用。

此问题将在未来的SDK版本中解决。

Answer 2

我有同样的问题。

问题是当毒性队列中的消息副本通过ref传递而没有可见时间https://github.com/Azure/azure-webjobs-sdk/blob/dev/src/Microsoft.Azure.WebJobs.Host/Queues/QueueProcessor.cs#L145时，当尝试从原始队列中删除消息时，服务返回404未找到。是azure-webjobs-sdk中的问题，解决方案是进行此更改

await AddMessageAndCreateIfNotExistsAsync(poisonQueue, new CloudQueueMessage(message.AsString), cancellationToken);

<{3>}中的

我们等待这个修复的新版本

自定义解决方案

要解决此问题，请创建自己的CustomProcessor，并在 CopyMessageToPoisonQueueAsync 函数中创建新的CloudMessage，从原始队列传入毒性队列，请参阅下面的示例。

var config = new JobHostConfiguration
config.Queues.QueueProcessorFactory = new CustomQueueProcessorFactory();

public QueueProcessor Create(QueueProcessorFactoryContext context)
    {
        // demonstrates how the Queue.ServiceClient options can be configured
        context.Queue.ServiceClient.DefaultRequestOptions.ServerTimeout = TimeSpan.FromSeconds(30);

        // demonstrates how queue options can be customized
        context.Queue.EncodeMessage = true;

        // return the custom queue processor
        return new CustomQueueProcessor(context);
    }

    /// <summary>
    /// Custom QueueProcessor demonstrating some of the virtuals that can be overridden
    /// to customize queue processing.
    /// </summary>
    private class CustomQueueProcessor : QueueProcessor
    {
        private QueueProcessorFactoryContext _context;
        public CustomQueueProcessor(QueueProcessorFactoryContext context)
            : base(context)
        {
            _context = context;
        }

        public override async Task CompleteProcessingMessageAsync(CloudQueueMessage message, FunctionResult result, CancellationToken cancellationToken)
        {
            await base.CompleteProcessingMessageAsync(message, result, cancellationToken);
        }
        protected override async Task CopyMessageToPoisonQueueAsync(CloudQueueMessage message, CloudQueue poisonQueue, CancellationToken cancellationToken)
        {
            var msg = new CloudQueueMessage(message.AsString);
            await base.CopyMessageToPoisonQueueAsync(msg, poisonQueue, cancellationToken);
        }
        protected override void OnMessageAddedToPoisonQueue(PoisonMessageEventArgs e)
        {
            base.OnMessageAddedToPoisonQueue(e);
        }
    }

Answer 3

对于那些仍有这个问题的人。这应该从2.1.0-beta1-10851开始修复。缺点是目前还没有稳定发布的2.1.0版本。

移动到Poison Queue的队列消息仍显示为队列计数，但保持隐藏状态

3 个答案: