我正在编写一个简单的类,我的应用程序将使用RabbitMQ发送和接收消息。 我已经阅读了尽可能多的How-Tos,博客文章,白皮书以及关于RabbitMQ的喜欢。 大多数示例显示使用包含在using块中的连接和通道,并且通过说您应该将它们实现为单例来抵销它。 特别是关于频道,我看到评论说你不应该同时使用单个频道的单个线程。
我正在用c#编写我的库。它是在第一次实例化时连接静态连接的单例。
我想为频道做同样的事情,但我打算使用相同的库来允许发布/订阅多个交换/队列。发布和订阅都可以从多个线程完成。
最后我的问题: 我该如何实现频道创作? 每条消息? 让每个消费者拥有一个独特的私人频道,发布商同步访问一个独特的频道吗? 你抓住了我的漂移。 请记住,我打算使用单个服务器,有几十个消费者/发布者,而不是更多。
谢谢!
答案 0 :(得分:6)
编辑(2016-1-26):频道不是线程安全的。关于该文档的文档在April和May 2015之间发生了变化。新文本:
不得在线程之间共享通道实例。应用程序应该更喜欢每个线程使用一个Channel,而不是跨多个线程共享相同的Channel。虽然通道上的某些操作可以安全地同时调用,但有些操作并不会导致错误的帧交错。在线程之间共享通道也会干扰* Publisher Confirms。
从您的问题来看,您似乎没有预定义的,固定数量的线程,主要发布/订阅RabbitMQ(在这种情况下,您可能会考虑创建一个通道作为线程初始化的一部分,或者使用一个ThreadLocal<IModel>
)。
如果并发的RabbitMQ操作很少或消息大小总是很小,那么您可能只需在所有RabbitMQ发布/子操作周围放置一个lock(channel)
即可。如果您需要以交错的方式传输多个请求 - 这就是首先使用的通道 - 使用任意线程,您可能需要创建一个通道池,例如a ConcurrentQueue<IModel>
您将未使用的频道排队并在您需要的时间内出列队列。 频道创建的开销非常低,从性能测试来看,我感觉频道创建的过程不涉及任何网络io,即它似乎是一个频道在客户端首次使用时,会在RabbitMQ服务器中自动创建。
OLD (2016-1-26之前):Java和.net实现现在已经过时的细节:
Re:通道和多个线程,由于它依赖于实现,这有点令人困惑。
Java实施:Channels are thread safe:
多个线程可以安全地使用通道实例。
But:
在多个线程之间共享通道时,确认无法正确处理
.net实施:Channels are not thread safe:
如果多个线程需要访问特定的IModel实例,则应用程序应该自行实施互斥。
IModel操作序列化错误的症状包括但不限于
•在线上发送无效的帧序列
•抛出NotSupportedExceptions ...
因此,除了Robin的有用答案之外,无论是否线程安全,无论是.net实现中的,您都不能只分享连接。
答案 1 :(得分:3)
它阐明了aqmp的内部结构。 目前,我的理解是: 答:我可以从每个应用程序(作为静态共享资源)保持与服务器的单个共享tcp连接 B.我应该为每个“任务”创建一个通道(一个用于监听队列X,一个用于发布以交换Y等,假设这些“任务”可以并行执行) C.或者我可以在一个应用程序中使用一个通道,同时确保对它的访问是同步的 - 使用一些锁定机制,假设使用(锁定)通道的实际时间相对非常短。
感谢。
答案 2 :(得分:2)
我无法评论C#实现的细节,但可能有助于知道Amqp通道旨在共享单个TCP连接,即启用多路复用。单个通道一次只能发送一个或接收一个消息,但是连接可以同时在不同的通道上接收消息。图像你有2个大的1GB文件,你通过Amqp发送给一个消费者,消息可能会分成10K块,并以交错的方式发送。您可以在设置连接时操纵默认的Amqp消息大小,这与您是否以及何时可能会遇到交错有关; AFAIK此功能旨在帮助防止多个消费者共享连接并且一个消费者收到大量消息时的饥饿。
HTH。
答案 3 :(得分:2)
你是正确的,Channel不是线程安全的,不应该由多个线程访问。
如果您计划使用不同的队列,则可以使用单个通道拥有多个队列。但是如果您计划进行多个交换(不确定为什么在这里需要更多的交换),您将被迫跟踪单个中的多个交换和通道,或将该责任转移给调用者。
我会构建你的单例,例如它有一个观察者模式,并在那里保存所有RabbitMQ内容,并引用你的调用者。然后,您还需要对单个线程的调用进行编组处理,否则您可能会冒险使用通道对象。
答案 4 :(得分:2)
使用ASP.NET Core,可以使用ObjectPool。创建一个IPooledObjectPolicy
using Microsoft.Extensions.ObjectPool;
using Microsoft.Extensions.Options;
using RabbitMQ.Client;
public class RabbitModelPooledObjectPolicy : IPooledObjectPolicy<IModel>
{
private readonly RabbitOptions _options;
private readonly IConnection _connection;
public RabbitModelPooledObjectPolicy(IOptions<RabbitOptions> optionsAccs)
{
_options = optionsAccs.Value;
_connection = GetConnection();
}
private IConnection GetConnection()
{
var factory = new ConnectionFactory()
{
HostName = _options.HostName,
UserName = _options.UserName,
Password = _options.Password,
Port = _options.Port,
VirtualHost = _options.VHost,
};
return factory.CreateConnection();
}
public IModel Create()
{
return _connection.CreateModel();
}
public bool Return(IModel obj)
{
if (obj.IsOpen)
{
return true;
}
else
{
obj?.Dispose();
return false;
}
}
}
然后为ObjectPool配置依赖项注入
services.AddSingleton<ObjectPoolProvider, DefaultObjectPoolProvider>();
services.AddSingleton(s =>
{
var provider = s.GetRequiredService<ObjectPoolProvider>();
return provider.Create(new RabbitModelPooledObjectPolicy());
});
然后您可以注入ObjectPool<IModel>
,并使用它
var channel = pool.Get();
try
{
channel.BasicPublish(...);
}
finally
{
pool.Return(channel);
}
来源:
https://www.c-sharpcorner.com/article/publishing-rabbitmq-message-in-asp-net-core/
https://developpaper.com/detailed-explanation-of-object-pools-various-usages-in-net-core/