就像一个简单的例子,假设我想在netty中只使用2个工作线程来处理3个同时的TCP客户端连接,我该怎么做?
问题 一个) 使用下面的代码,我的第三个连接不会从服务器获取任何数据 - 连接就在那里。注意 - 我的工人执行人员和工人人数是2。 所以,如果我有2个工作线程和3个连接,那么两个线程不应该为所有三个连接提供服务吗?
B) 另一个问题是 - netty是否使用java.util.concurrent的CompletionService?它似乎没有使用它。另外,我没有看到任何执行executor.submit或future.get的源代码 所有这些都增加了它如何处理数据并将数据提供给比其工作线程更多的连接的混乱?
C) 我迷失了netty如何处理10000多个并发的TCP连接....它会创建10000个线程吗?每个连接的线程不是一个可扩展的解决方案,所以我很困惑,因为我的测试代码不能按预期工作。
import java.net.InetSocketAddress;
import java.nio.channels.ClosedChannelException;
import java.util.Date;
import java.util.concurrent.Executors;
import java.util.logging.Level;
import java.util.logging.Logger;
import org.jboss.netty.bootstrap.ServerBootstrap;
import org.jboss.netty.channel.Channel;
import org.jboss.netty.channel.ChannelFuture;
import org.jboss.netty.channel.ChannelFutureListener;
import org.jboss.netty.channel.ChannelHandlerContext;
import org.jboss.netty.channel.ChannelPipeline;
import org.jboss.netty.channel.ChannelPipelineFactory;
import org.jboss.netty.channel.ChannelStateEvent;
import org.jboss.netty.channel.Channels;
import org.jboss.netty.channel.ExceptionEvent;
import org.jboss.netty.channel.SimpleChannelUpstreamHandler;
import org.jboss.netty.channel.socket.nio.NioServerSocketChannelFactory;
import org.jboss.netty.handler.codec.string.StringEncoder;
public class SRNGServer {
public static void main(String[] args) throws Exception {
// Configure the server.
ServerBootstrap bootstrap = new ServerBootstrap(
new NioServerSocketChannelFactory(
Executors.newCachedThreadPool(),
//Executors.newCachedThreadPool()
Executors.newFixedThreadPool(2),2
));
// Configure the pipeline factory.
bootstrap.setPipelineFactory(new SRNGServerPipelineFactoryP());
// Bind and start to accept incoming connections.
bootstrap.bind(new InetSocketAddress(8080));
}
private static class SRNGServerHandlerP extends SimpleChannelUpstreamHandler {
private static final Logger logger = Logger.getLogger(SRNGServerHandlerP.class.getName());
@Override
public void channelConnected(
ChannelHandlerContext ctx, ChannelStateEvent e) throws Exception {
// Send greeting for a new connection.
Channel ch=e.getChannel();
System.out.printf("channelConnected with channel=[%s]%n", ch);
ChannelFuture writeFuture=e.getChannel().write("It is " + new Date() + " now.\r\n");
SRNGChannelFutureListener srngcfl=new SRNGChannelFutureListener();
System.out.printf("Registered listener=[%s] for future=[%s]%n", srngcfl, writeFuture);
writeFuture.addListener(srngcfl);
}
@Override
public void exceptionCaught(
ChannelHandlerContext ctx, ExceptionEvent e) {
logger.log(
Level.WARNING,
"Unexpected exception from downstream.",
e.getCause());
if(e.getCause() instanceof ClosedChannelException){
logger.log(Level.INFO, "****** Connection closed by client - Closing Channel");
}
e.getChannel().close();
}
}
private static class SRNGServerPipelineFactoryP implements ChannelPipelineFactory {
public ChannelPipeline getPipeline() throws Exception {
// Create a default pipeline implementation.
ChannelPipeline pipeline = Channels.pipeline();
pipeline.addLast("encoder", new StringEncoder());
pipeline.addLast("handler", new SRNGServerHandlerP());
return pipeline;
}
}
private static class SRNGChannelFutureListener implements ChannelFutureListener{
public void operationComplete(ChannelFuture future) throws InterruptedException{
Thread.sleep(1000*5);
Channel ch=future.getChannel();
if(ch!=null && ch.isConnected()){
ChannelFuture writeFuture=ch.write("It is " + new Date() + " now.\r\n");
//-- Add this instance as listener itself.
writeFuture.addListener(this);
}
}
}
}
答案 0 :(得分:4)
我没有详细分析您的源代码,所以我不确切地知道它为什么不能正常工作。但SRNGChannelFutureListener
中的这一行看起来很可疑:
Thread.sleep(1000*5);
这将使执行它的线程锁定5秒;在此期间,该线程将无法进行任何其他处理。
问题C:不,它不会创建10,000个线程; Netty的全部意义在于它没有这样做,因为那确实不会很好地扩展。相反,它使用来自线程池的有限数量的线程,在发生某些事件时生成事件,并在池中的线程上运行事件处理程序。因此,线程和连接彼此分离(每个连接都没有线程)。
要使此机制正常工作,您的事件处理程序应尽快返回,以使其运行的线程可用于尽快运行下一个事件处理程序。如果让线程休眠5秒钟,那么你将保持线程分配,因此它不可用于处理其他事件。
问题B:如果你真的想知道你可以获得Netty的源代码并找出答案。它使用选择器和其他java.nio
类来执行asynchronous I/O。