Java实现模拟浏览器 请求web服务_Java_无名之辈ミ-CSDN博客

问题背景:测试工具要实现运行被测试设备里面的web服务中的某个url请求(HTML),运行里面js的相关事件,抓取返回值,这里关键是怎么通过工具实现请求被测试设备的url(web服务),这里我通过上网学习,写了几种思路的方法.

方法一:  直接使用Java方法调用系统浏览器,然后请求URL

下面是我实现这种思路的部分代码

public static void runBroswer(String url,int flag) {        try {            Desktop desktop = Desktop.getDesktop();            if (desktop.isDesktopSupported() && desktop.isSupported(Desktop.Action.BROWSE)) {                URI uri = new URI(url);                desktop.browse(uri); //使用系统默认的浏览器执行这个url                Thread.sleep(2000);                //Runtime.getRuntime().exec("taskkill /F /IM Iexplore.exe");                Runtime.getRuntime().exec("taskkill  /IM firefox.exe"); //因为我系统默认的是火狐,然后关闭火狐浏览器                }            }

这种方法,实现的效果在实际中,就是要调用浏览器,桌面会弹出浏览器界面,然后请求url;

方法二: httpclient httpurlconnection

后面我在想,能不能直接使用Java模拟浏览器直接实现url请求,开始是使用这两个httpclient 和 HttpUrlConnection来实现这个效果,下面是部分代码:

                String strUrl = "http://localhost:8088/testWeb"; //这是我临时建的web项目,去访问它的index.jsp界面        URL url = new URL(strUrl);        HttpURLConnection httpcon = (HttpURLConnection) url.openConnection();        InputStreamReader input = new InputStreamReader(httpcon.getInputStream(), "utf-8");        BufferedReader br = new BufferedReader(input);        StringBuffer sb = new StringBuffer();        String line = "";        while((line = br.readLine()) != null){ //读取每行数据            sb.append(line);            sb.append("\r\n");        }        String sbString = sb.toString();        System.out.println("result... "+sbString);

通过运行这部分代码发现.它只是完全返回HTML代码,并没有执行HTML里面的js onload()事件,也就是没有运行,js;当然我这部分代码是使用HttpUrlConnection类,也可以使用Httpclient类,第三方工具类;

方法三: 使用HtmlUtil 工具类

因为第二种方法我感觉他是没有运行js里面的事件,只是获取HTML代码,后面继续网上学习,发现了HtmlUtil这个工具类.

HtmlUnit是一款基于Java的没有图形界面的浏览器程序。它模仿HTML document并且提供API让开发人员像是在一个正常的浏览器上操作一样，获取网页内容，填充表单，点击超链接等等。

它非常好的支持JavaScript并且仍在不断改进，同时能够解析非常复杂的AJAX库，通过不同的配置来模拟Chrome、Firefox和IE浏览器。

下面是我实现的部分代码:

public static void main(String[] args) {                WebClient wc = new WebClient(BrowserVersion.getDefault());            wc.setJavaScriptEnabled(true); //启用JS解释器，默认为true            wc.setJavaScriptTimeout(100000);//设置JS执行的超时时间          wc.setCssEnabled(false); //禁用css支持            wc.setThrowExceptionOnScriptError(false); //js运行错误时，是否抛出异常            wc.setTimeout(10000); //设置连接超时时间 ，这里是10S。如果为0，则无限期等待                     //wc.setWebConnection(                          //           new WebConnectionWrapper(wc) {          //            public WebResponse getResponse(WebRequest request) throws IOException {          //                         WebResponse response = super.getResponse(request);          //                         if (request.getUrl().toExternalForm().contains("test.js")) {          //                             String content = response.getContentAsString("GBK");          //                             WebResponseData data = new WebResponseData(content.getBytes("UTF-8"),          //                                     response.getStatusCode(), response.getStatusMessage(), response.getResponseHeaders());          //                             response = new WebResponse(data, request, response.getLoadTime());          //                         }          //                         return response;          //                     }          //           }                              //);          try {            //HtmlPage page = wc.getPage("http://192.168.0.1/Del_Bridge_Wan.html");                  HtmlPage page = wc.getPage("http://localhost:8088/testWeb");            FileWriter fileWriter = new FileWriter("D:\\text.html");             System.out.println("over...");            String str = "";              //获取页面的XML代码              str = page.asXml();              fileWriter.write( str );              //关闭webclient              //wc.close();              wc.closeAllWindows();            fileWriter.close();        } catch (Exception e) {            e.printStackTrace();        }        }

通过运行这部分代码后发现,(注释部分解决编码问题,可以通过重写WebConnectionWrapper类的getResponse方法来修改返回值),运行了HTML里面的onload事件,达到了不调用浏览器也能访问url,并能运行js事件,而不是直接返回该HTML的源代码.最后打开生成的test.html就可以发现是我之前创建的testWeb服务index.jsp里面写的返回值;

End:因为实现这个需求都是在网上学习别人的很多例子,如有知识侵权,请联系本人删除;如果发现写的不好或者有建议的可以互相讨论,互相学习.

Original url: Access
Created at: 2020-03-03 15:02:17
Category: default
Tags: none

未标明原创文章均为采集，版权归作者所有，转载无需和我联系，请注明原出处，南摩阿彌陀佛，知识，不只知道，要得到

请先后发表评论
  • 最新评论
  • 总共0条评论