java – HttpClient vs HtmlUnit

我知道HtmlUnit模拟浏览器,而HttpClient则没有.

在HtmlUnit中,当一个页面被加载并且里面有一个JavaScript时,脚本会被执行吗？如果脚本设置了cookie,那么cookie是否会在HtmlUnit的浏览器中设置并可从Java代码访问？

有没有什么可以使用HttpClient,但不使用HtmlUnit？在HtmlUnit中,我们可以从POST请求开始并修改HTTP请求的任何部分,包括方法,URI,HTTP版本,标题和正文吗？

HttpClient比HtmlUnit有什么优势？

解决方法:

HttpClient是较低级别的库,用于发送HTTP请求和检索响应.

HtmlUnit处于更高级别,内部使用HttpClient发出HTTP请求,但也处理JavaScript(通过Rhino和内部DOM实现),XPath(通过Xalan),CSS(通过CSSParser),格式错误的HTML(通过NekoHtml),WebSockets(通过Jetty)等

您可以通过以下方式修改HtmlUnit中的传出请求和响应：

new WebConnectionWrapper(webClient) {

    public WebResponse getResponse(WebRequest request) throws IOException {
        WebResponse response = super.getResponse(request);
        if (request.getUrl().toExternalForm().contains("my_url")) {
            String content = response.getContentAsString("UTF-8");

            //change content

            WebResponseData data = new WebResponseData(content.getBytes("UTF-8"),
                    response.getStatusCode(), response.getStatusMessage(), response.getResponseHeaders());
            response = new WebResponse(data, request, response.getLoadTime());
        }
        return response;
    }
};

如暗示here.

您可以通过重写HttpWebConnection.createHttpClient()来更改HtmlUnit中使用的HttpClient.

您可以通过以下方式发出POST请求

WebRequest webRequest = new WebRequest(url, HttpMethod.POST);
HtmlPage page = webClient.getPage(webRequest);

标签：java,httpclient,htmlunit
来源： https://codeday.me/bug/20190828/1753056.html