PoolighttpClientConnectionManager的Java Apache HTTPClient时间等待性能问题

Question

我们正在使用ApacheHttpClient和PoolighttpClientConnectionManager，并创建一个连接池，每个路由大小分别为200和200（调用同一个endpoint）。

    PoolingHttpClientConnectionManager cm = new PoolingHttpClientConnectionManager(registryBuilder.build());
    cm.setMaxTotal(200);
    cm.setDefaultMaxPerRoute(200);

    httpClient = HttpClients.custom()
            .setConnectionManager(cm)
            .build();

HTTPClient被包装在一个单例类中（因此HTTPClient被共享）。然后，我使用它来发出GET请求，并用状态代码和主体进行响应。

public ResponseEntity<String> get(String url, Map<String, String> headers) throws IOException {

    HttpGet httpget = new HttpGet(url);
    httpget.setConfig(requestConfig);
    headers.forEach(httpget::addHeader);

    ResponseHandler<ResponseEntity<String>> responseHandler =   response -> {
        int status = response.getStatusLine().getStatusCode();
        HttpEntity entity = response.getEntity();
        String body = entity != null ? EntityUtils.toString(entity) : null;
        return new ResponseEntity<>(body, HttpStatus.valueOf(status));
    };

    return httpClient.execute(httpget, responseHandler);
}

然而，机器处于高CPU负载下，我们在netstat中遇到了大约30,000个TIME_WAIT套接字，只能达到大约250 TPS（我们的目标是1000 TPS）。

从30000<代码>TIME\u WAIT的声音来看，连接似乎没有被重复使用？

你知道为什么吗？

Answer 1

正是http保持活动的功能使这项功能得以实现。通常情况下，您当前的代码应该没有问题，因为在Apache http组件中默认启用了保持活动。

所以你需要确保：

• 在目标服务器上启用了保持活动（检查保持活动http标头）
• 您可以重新使用httpClient
• 时间等待中的套接字由您生成，而不是由服务器上的另一个进程生成

这是一段适用于我的代码，它几乎和你的一样：

DefaultHttpClient httpclient = new DefaultHttpClient();
PoolingClientConnectionManager pool = new   PoolingClientConnectionManager(httpclient.getConnectionManager().getSchemeRegistry());
pool.setMaxTotal(5000);
pool.setDefaultMaxPerRoute(1000);
HttpParams params = httpclient.getParams();
httpclient = new DefaultHttpClient(pool, params);

如果不起作用，可能是您连接到的服务器不支持保持活动（在本例中，它永远不会起作用）或支持非标准保持活动，在最新的情况下，您可以自定义Apache http组件的保持活动开始：https://hc.apache.org/httpcomponents-client-ga/tutorial/html/connmgmt.html-参见第2.6章-连接保持策略

更多信息可在此处找到：http://www.baeldung.com/httpclient-connection-management