用httpclient来模拟浏览器getpost.pdfVIP

用 HttpClient 来模拟浏览器 GET POST 一般的情况下我们都是使用 IE 或者 Navigator 浏览器来访问一个 WEB 服务器，用来浏览页面查看信息或者提交 一些数据等等。所访问的这些 页面有的仅仅是一些普通的页面，有的需要用户登录后方可使用，或者 需要认证以及是一些通过加密方式传输，例如 HTTPS。目前 我们使用 的浏览器处理这些情况都不会构成问题。不过你可能在某些时候需要通 过程序来访问这样的一些页面，比如从别人的网页中 “偷”一些数据； 利用某些站点 提供的页面来完成某种功能，例如说我们想知道某个手机 号码的归属地而我们自己又没有这样的数据，因此只好借助其他公司已 有的网站来完成这个功能，这个时候 我们需要向网页提交手机号码并 从返回的页面中解析出我们想要的数据来。如果对方仅仅是一个很简单 的页面，那我们的程序会很简单，本文也就没有必要大张旗鼓 的在这 里浪费口舌。但是考虑到一些服务授权的问题，很多公司提供的页面往 往并不是可以通过一个简单的 URL 就可以访问的，而必须经过注册然后 登录后方可使 用提供服务的页面，这个时候就涉及到 COOKIE 问题的处 理。我们知道目前流行的***页技术例如 ASP、JSP 无不是通过 COOKIE 来处理会话信息 的。为了使我们的程序能使用别人所提供的服务页面， 就要求程序首先登录后再访问服务页面，这过程就需要自行处理cookie， 想想当你用 .HttpURLConnection 来完成这些功能时是多么恐 怖的事情啊！况且这仅仅是我们所说的顽固的WEB服务器中的一个很常 见的 “顽固”！再有如通过 HTTP 来上传文件呢？不需要头疼，这些问 题有了 “它”就很容易解决了！ 我们不可能列举所有可能的顽固，我们会针对几种最常见的问题进行处 理。当然了，正如前面说到的，如果我们自己使用 .HttpURLConnection 来搞定这些问题是很恐怖的事情，因此在 开始之前我们先要介绍一下一个开放源码的项目，这个项目就是 Apache 开源组织中的 httpclient，它隶属于 Jakarta 的 commons 项目， 目前的版本是2.0RC2。commons 下本来已经有一 个 net 的子项目，但是 又把 httpclient 单独提出来，可见 http 服务器的访问绝非易事。 Commons-httpclient 项目就是专门设计来简化 HTTP 客户端与服务器进 行各种通讯编程。通过它可以 让原来很头疼的事情现在轻松的解决，例 如你不再管是 HTTP 或者 HTTPS 的通讯方式，告诉它你想使用 HTTPS 方 式，剩下的事情交给 httpclient 替你完成。本文会针对我们在编写HTTP 客户端程序时经常碰到的几个问题进行分别介绍如何使用 httpclient 来解决它们，为了 让读者更快的熟悉这个项目我们最开始先给出一个 简单的例子来读取一个网页的内容，然后循序渐进解决掉前进中的所形 侍狻?/font 1． 读取网页 (HTTP/HTTPS)内容 下面是我们给出的一个简单的例子用来访问某个页面 /* * Created on 2003-12-14 by Liudong */ package http.demo; import java.io.IOException; import mons.httpclient.*; import mons.httpclient.methods.*; /** * 最简单的HTTP 客户端,用来演示通过GET 或者POST 方式访问某个页 面 * @author Liudong */ public class SimpleClient { public static void main(String[] args) throws IOException { HttpClient client = new HttpClient(); //设置代理服务器地址和端口 //client.getHostConfiguration().setProxy(proxy _host_addr,proxy_port); //使用 GET 方法，如果服务器需要通过 HTTPS 连接，那 只需要将下面 URL 中的http 换成 https