HttpClient jar包

HttpClient 简介

HttpClient 是 Apache 提供的 Java 客户端 HTTP 通信库，主要用于发送 HTTP 请求并处理响应。适用于需要自动化 HTTP 交互的场景，如爬虫、接口调试、远程数据采集等。核心功能包括支持 GET/POST 等多种请求方法、自动重定向、HTTPS 协议、代理服务器配置等。

开发者为 Apache 基金会，目标用户为 Java 开发者。核心价值在于提供稳定、高效的底层 HTTP 通信能力，替代 Java 原生 URLConnection 的繁琐实现。

HttpClient 功能

1. 支持全类型 HTTP 方法：GET、POST、PUT、DELETE 等

2. 自动处理重定向：可配置是否跟随 3xx 响应码跳转

3. HTTPS 通信支持：内置 SSL/TLS 加密通道建立

4. 表单数据提交：自动编码 URL 参数或 JSON 格式数据

5. 响应内容解析：支持按字符/字节流处理响应体

6. 连接池管理：复用 TCP 连接提升批量请求效率

HttpClient 亮点

1. 版本迭代活跃：当前主流版本 4.5.13（稳定）与 5.1.3（支持 HTTP/2）

2. 高并发优化：通过连接池机制支持每秒数千次请求

3. 异步支持（v5）：新增异步客户端，实现非阻塞 I/O

4. 全面的协议兼容：完整实现 HTTP/1.1，支持分块传输编码

5. 调试友好：内置日志拦截器可输出请求/响应全过程

6. 企业级特性：支持 Kerberos 认证、NTLM 等企业安全协议

如何用GET方法来获取某网页内容的代码

大部分情况下 HttpClient 默认的构造函数已经足够使用。 HttpClient HttpClient = new HttpClient(); 
创建GET方法的实例。在GET方法的构造函数中传入待连接的地址即可。用GetMethod将会自动处理转发过程，如果想要把自动处理转发过程去掉的话，可以调用方法 setFollowRedirects(false)。 GetMethod getMethod = new GetMethod("....."); 
调用实例HttpClient的executeMethod方法来执行getMethod。由于是执行在网络上的程序，在运行executeMethod方法的时候，需要处理两个异常，分别是HttpException和IOException。引起第一种异常的原因主要可能是在构造getMethod的时候传入的协议不对，比如不小心将"http"写成"htp"，或者服务器端返回的内容不正常等，并且该异常发生是不可恢复的；第二种异常一般是由于网络原因引起的异常，对于这种异常 （IOException），HttpClient会根据你指定的恢复策略自动试着重新执行executeMethod方法。HttpClient的恢复策略可以自定义（通过实现接口HttpMethodRetryHandler来实现）。通过HttpClient的方法setParameter设置你实现的恢复策略，本文中使用的是系统提供的默认恢复策略，该策略在碰到第二类异常的时候将自动重试3次。executeMethod返回值是一个整数，表示了执行该方法后服务器返回的状态码，该状态码能表示出该方法执行是否成功、需要认证或者页面发生了跳转（默认状态下GetMethod的实例是自动处理跳转的）等。 //设置成了默认的恢复策略，在发生异常时候将自动重试3次，在这里你也可以设置成自定义的恢复策略
getMethod.getParams().setParameter(HttpMethodParams.RETRY_HANDLER
new DefaultHttpMethodRetryHandler());
//执行getMethod 
int statusCode = client.executeMethod(getMethod);
if (statusCode != HttpStatus.SC_OK) {
System.err.println("Method failed: " + getMethod.getStatusLine())
} 
在返回的状态码正确后，即可取得内容。取得目标地址的内容有三种方法：第一种，getResponseBody，该方法返回的是目标的二进制的byte流；第二种， getResponseBodyAsString，这个方法返回的是String类型，值得注意的是该方法返回的

HttpClient 的基本使用技巧

1、创建 HttpClient 的实例
2、创建某种连接方法的实例，在这里是 GetMethod。在 GetMethod 的构造函数中传入待连接的地址
3、调用第一步中创建好的实例的 execute 方法来执行第二步中创建好的 method 实例
4、读 response
5、释放连接。无论执行方法是否成功，都必须释放连接
6、对得到后的内容进行处理

更新日志

1. 修复了 HTTP/2 流复用时偶发的空指针异常

2. 新增自动压缩解压功能，默认处理 gzip 压缩响应

3. 优化连接池回收逻辑，高并发下内存占用降低 40%

4. 改进 Cookie 管理器，支持跨域 Cookie 存储策略配置

5. 根据反馈，增加同步/异步客户端启动参数分离配置