在开发期间从SQS删除消息的最佳方法

时间:2011-10-10 13:39:04

标签: amazon-sqs

在开发过程中,我在Amazon SQS上生成了大量虚假消息。我正准备编写一个小应用程序来删除所有消息(我在开发过程中经常这样做)。有没有人知道清除队列的工具?

9 个答案:

答案 0 :(得分:45)

如果您不想编写脚本或删除队列。您可以更改队列配置:

  1. 右键点击队列> configure queue
  2. Message Retention period更改为1分钟(可设置的最短时间)。
  3. 等待所有消息消失。
  4. 我发现这种方式可以很好地删除队列中的所有消息而不删除队列。

答案 1 :(得分:9)

截至2014年12月,sqs控制台现在在队列操作菜单中有一个清除队列选项。

答案 2 :(得分:7)

对于任何来到这里的人来说,寻找一种在C#中集体删除SQS消息的方法......

//C# Console app which deletes all messages from a specified queue
//AWS .NET library required.

using System;
using System.Net;
using System.Configuration;
using System.Collections.Specialized;
using System.IO;
using System.Linq;
using System.Text;

using Amazon;
using Amazon.SQS;
using Amazon.SQS.Model;
using System.Timers;

using System.Collections.Generic;
using System.Text.RegularExpressions;
using System.Diagnostics;

namespace QueueDeleter
{
    class Program
    {
        public static System.Timers.Timer myTimer;
        static NameValueCollection appConfig = ConfigurationManager.AppSettings;
        static string accessKeyID = appConfig["AWSAccessKey"];
        static string secretAccessKeyID = appConfig["AWSSecretKey"];
        static private AmazonSQS sqs;

        static string myQueueUrl = "https://queue.amazonaws.com/1640634564530223/myQueueUrl";
        public static String messageReceiptHandle;

        public static void Main(string[] args)
        {
            sqs = AWSClientFactory.CreateAmazonSQSClient(accessKeyID, secretAccessKeyID);

            myTimer = new System.Timers.Timer();
            myTimer.Interval = 10;
            myTimer.Elapsed += new ElapsedEventHandler(checkQueue);
            myTimer.AutoReset = true;
            myTimer.Start();
            Console.Read();
        }

        static void checkQueue(object source, ElapsedEventArgs e)
        {
            myTimer.Stop();

            ReceiveMessageRequest receiveMessageRequest = new ReceiveMessageRequest();
            receiveMessageRequest.QueueUrl = myQueueUrl;
            ReceiveMessageResponse receiveMessageResponse = sqs.ReceiveMessage(receiveMessageRequest);
            if (receiveMessageResponse.IsSetReceiveMessageResult())
            {
                ReceiveMessageResult receiveMessageResult = receiveMessageResponse.ReceiveMessageResult;

                if (receiveMessageResult.Message.Count < 1)
                {
                    Console.WriteLine("Can't find any visible messages.");
                    myTimer.Start();
                    return;
                }

            foreach (Message message in receiveMessageResult.Message)
            {
                Console.WriteLine("Printing received message.\n");

                messageReceiptHandle = message.ReceiptHandle;

                Console.WriteLine("Message Body:");
                if (message.IsSetBody())
                {
                    Console.WriteLine("    Body: {0}", message.Body);
                }
                sqs.DeleteMessage(new DeleteMessageRequest().WithQueueUrl(myQueueUrl).WithReceiptHandle(messageReceiptHandle));
            }
        }
        else
        {
            Console.WriteLine("No new messages.");
        }

         myTimer.Start();
        }
    }
}

答案 3 :(得分:5)

检查队列中的第一项。向下滚动到队列中的最后一项。 按住shift,点击项目。所有人都将被选中。

答案 4 :(得分:4)

我认为最好的方法是删除队列并再次创建它,只需要2个请求。

答案 5 :(得分:1)

我认为最好的方法是将保留期改为1分钟,但如果有人需要,这里是Python代码:

#!/usr/bin/python
# -*- coding: utf-8 -*-

import boto.sqs
from boto.sqs.message import Message
import time
import os

startTime = program_start_time = time.strftime("%Y-%m-%d %H:%M:%S", time.gmtime())

### Lets connect to SQS:
qcon = boto.sqs.connect_to_region(region,aws_access_key_id='xxx',aws_secret_access_key='xxx')
SHQueue = qcon.get_queue('SQS')
m = Message()
### Read file and write to SQS
counter = 0
while counter < 1000:   ## For deleting 1000*10 items, change to True if you want delete all
    links = SHQueue.get_messages(10)
    for link in links:
            m = link
            SHQueue.delete_message(m)
    counter += 1
#### The End
print "\n\nTerminating...\n"
print "Start: ", program_start_time
print "End time: ", time.strftime("%Y-%m-%d %H:%M:%S", time.gmtime())

答案 6 :(得分:1)

选项1:boto sqs有一个python的purge_queue方法:

purge_queue(queue)
Purge all messages in an SQS Queue.

Parameters: queue (A Queue object) – The SQS queue to be purged
Return type:    bool
Returns:    True if the command succeeded, False otherwise

来源:http://boto.readthedocs.org/en/latest/ref/sqs.html

适用于我的代码:

conn = boto.sqs.connect_to_region('us-east-1',
          aws_access_key_id=AWS_ACCESS_KEY_ID,
          aws_secret_access_key=AWS_SECRET_ACCESS_KEY,
)
q = conn.create_queue("blah")
#add some messages here

#invoke the purge_queue method of the conn, and pass in the
#queue to purge.
conn.purge_queue(self.queue)

对我来说,它删除了队列。但是,Amazon SQS只允许您每60秒运行一次。所以我不得不使用下面的二级解决方案:

选项2:通过使用while循环中的所有消息并将其丢弃来进行清除:

    all_messages = []
    rs = self.queue.get_messages(10)
    while len(rs) > 0:
        all_messages.extend(rs)
        rs = self.queue.get_messages(10)

答案 7 :(得分:0)

如果您有权访问AWS控制台,则可以使用Web UI清除队列。

<强>步骤:

  • 导航至服务 - &gt; SQS
  • 按&#34; QUEUE_NAME&#34;
  • 过滤队列
  • 右键点击您的队列名称 - &gt;清除队列

这将要求清除队列,这应该在5或10秒左右完成。

请参阅下文,了解如何执行此操作:

Purge queue manually

答案 8 :(得分:0)