AWS boto sqs - 为什么我不能发布大于196 000字节的消息？

Question

根据SQS docs，可以发布最多256KB的数据。我将队列配置为256KB的数据，但是当我使用boto发布时，我的最大值为~196 000字节。除此之外，我得到了SQS的以下回复：

boto.exception.SQSError: SQSError: 400 Bad Request
<?xml version="1.0"?><ErrorResponse xmlns="http://queue.amazonaws.com/doc/2012-11-05/">
<Error><Type>Sender</Type><Code>InvalidParameterValue</Code><Message>
Value for parameter       MessageBody is invalid. Reason: Message body must be shorter     than 262144 bytes.</Message>
<Detail/></Error><RequestId>dd24151b-d499-5bb1-acd0-5f776011e960</RequestId></ErrorResponse>

小python程序来说明：

from boto.sqs.message import Message
from boto.sqs.connection import SQSConnection
from boto.sqs.message import Message
import sys

sqs_conn = SQSConnection(AWS_KEY, AWS_SECRET)

data = mylong_256kb_string

print sys.getsizeof(data)
current_queue = sqs_conn.create_queue('test_temp_queue')

m = Message()
m.set_body(data)

current_queue.write(m)

Answer 1

这是因为默认情况下，boto base64在发送消息之前对消息的有效负载进行编码，并在读取时对其进行解码。这主要是因为历史原因;在SQS的早期，对SQS消息中的字符类型有很多限制。事实并非如此，因此编码/解码可能不是必需的。

要绕过它，只需使用boto.message.RawMessage类而不是boto.message.Message。