如何管理具有相同IP和不同远程端口的套接字连接？

Question

我有一个客户端可以通过端口连接到它的服务器。我使用CurrPorts软件监控连接的客户端 我用vb.net和socket编程开发服务器代码。我有一个ArraylList来存储所有客户端的套接字连接 当我在CurrPorts中监视端口上的连接时，我看到每个客户端都有多个连接到具有相同IP和不同远程端口的服务器。
在这种情况下，当我关闭客户端的重复连接时，客户端的所有连接都将关闭 如何管理具有相同IP和不同远程端口的套接字连接？