HttpClient上严格可靠的超时

时间:2012-01-31 14:38:25

标签: java timeout httpclient urlconnection

我正在使用像这样的HttpClient阅读网页:

        httpclient = new DefaultHttpClient();
        httpget = new HttpGet("http://google.com");
        HttpResponse response = httpclient.execute(httpget);
        HttpEntity entity = response.getEntity();
        if (entity != null) {
            InputStream PIS = entity.getContent();
        }  

我需要在整个工作上超时(连接,等待和阅读 - 全部或单独) 我尝试在httpclient = new DefaultHttpClient();行之后设置超时参数:

        int timeout=10;
        httpclient.getParams().setParameter("http.socket.timeout", timeout * 1000);
        httpclient.getParams().setParameter("http.connection.timeout", timeout * 1000);
        httpclient.getParams().setParameter("http.connection-manager.timeout", new Long(timeout * 1000));
        httpclient.getParams().setParameter("http.protocol.head-body-timeout", timeout * 1000);

但它没有奏效(超过我设定的超时时间超过10倍) 所以我尝试了一个线程,在使用httpget.abort()& httpclient.getConnectionManager().shutdown()之后的httpget = new HttpGet("http://google.com");就像这样:

        (new Timer()).schedule(new java.util.TimerTask() {
            public void run() {
                httpget.abort();
                httpclient.getConnectionManager().shutdown();
            }
        },10000);

但它没有效果(计时器运行;但这两行代码什么也没做!)!!
我也试过用这个:

URL url = new URL("http://google.com");
URLConnection con = url.openConnection();
con.setConnectTimeout(10000);
con.setReadTimeout(10000);
InputStream PIS = con.getInputStream();

但它与我的第一次尝试相同(在HttpClient中设置超时参数)!!

问题是什么? 如何解决我的超时问题?

由于

1 个答案:

答案 0 :(得分:8)

不是解决方案,而是对正在发生的事情的更多解释。

你在做什么是正确的。

首先,如果您使用的是Log4J,请确保您看到HttpClient想要向您展示的所有内容:

log4j.logger.org.apache.http=trace

然后看一下这堂课:

http://hc.apache.org/httpcomponents-client-ga/httpclient/apidocs/org/apache/http/impl/conn/DefaultClientConnectionOperator.html

  

此连接运营商可识别多家网络,将尝试按顺序重试所有已知IP地址的失败连接,直到连接成功或所有已知地址无法响应。请注意相同的CoreConnectionPNames.CONNECTION_TIMEOUT值将用于每次连接尝试,因此在最坏的情况下,超时前的总耗用时间可以是 CONNECTION_TIMEOUT * n ,其中n是给定主机的IP地址数。

这就是你个案中最有可能发生的事情。

此外,最好使用此界面中的常量 HttpConnectionParams

SO_TIMEOUT = "http.socket.timeout"
TCP_NODELAY = "http.tcp.nodelay"
SOCKET_BUFFER_SIZE = "http.socket.buffer-size"
SO_LINGER = "http.socket.linger"
SO_REUSEADDR = "http.socket.reuseaddr"
CONNECTION_TIMEOUT = "http.connection.timeout"
STALE_CONNECTION_CHECK = "http.connection.stalecheck"
MAX_LINE_LENGTH = "http.connection.max-line-length"
MAX_HEADER_COUNT = "http.connection.max-header-count"
MIN_CHUNK_LIMIT = "http.connection.min-chunk-limit"

你只需要其中两个:

HttpConnectionParams.CONNECTION_TIMEOUT
HttpConnectionParams.SO_TIMEOUT

因此,解决此问题的最佳方法是实现仅返回一个IP地址的自定义 ClientConnectionOperator.resolveHostname 方法。