ICode9

精准搜索请尝试: 精确搜索
首页 > 编程语言> 文章详细

java – HttpClient vs HtmlUnit

2019-08-28 15:01:34  阅读:273  来源: 互联网

标签:java httpclient htmlunit


我知道HtmlUnit模拟浏览器,而HttpClient则没有.

在HtmlUnit中,当一个页面被加载并且里面有一个JavaScript时,脚本会被执行吗?如果脚本设置了cookie,那么cookie是否会在HtmlUnit的浏览器中设置并可从Java代码访问?

有没有什么可以使用HttpClient,但不使用HtmlUnit?在HtmlUnit中,我们可以从POST请求开始并修改HTTP请求的任何部分,包括方法,URI,HTTP版本,标题和正文吗?

HttpClient比HtmlUnit有什么优势?

解决方法:

HttpClient是较低级别的库,用于发送HTTP请求和检索响应.

HtmlUnit处于更高级别,内部使用HttpClient发出HTTP请求,但也处理JavaScript(通过Rhino和内部DOM实现),XPath(通过Xalan),CSS(通过CSSParser),格式错误的HTML(通过NekoHtml),WebSockets(通过Jetty)等

您可以通过以下方式修改HtmlUnit中的传出请求和响应:

new WebConnectionWrapper(webClient) {

    public WebResponse getResponse(WebRequest request) throws IOException {
        WebResponse response = super.getResponse(request);
        if (request.getUrl().toExternalForm().contains("my_url")) {
            String content = response.getContentAsString("UTF-8");

            //change content

            WebResponseData data = new WebResponseData(content.getBytes("UTF-8"),
                    response.getStatusCode(), response.getStatusMessage(), response.getResponseHeaders());
            response = new WebResponse(data, request, response.getLoadTime());
        }
        return response;
    }
};

如暗示here.

您可以通过重写HttpWebConnection.createHttpClient()来更改HtmlUnit中使用的HttpClient.

您可以通过以下方式发出POST请求

WebRequest webRequest = new WebRequest(url, HttpMethod.POST);
HtmlPage page = webClient.getPage(webRequest);

标签:java,httpclient,htmlunit
来源: https://codeday.me/bug/20190828/1753056.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有