Java抓取网页内容

R-B

[Java]代码

1. public static String fetchHtml(String urlString) {
   
2.     try {
   
3.         java.net.URL url = new java.net.URL(urlString); // 根据 String 表示形式创建 URL 对象。
   
4.         java.net.HttpURLConnection conn = (java.net.HttpURLConnection) url.openConnection(); // 返回一个 URLConnection 对象，它表示到 URL 所引用的远程对象的连接。
   
5.         java.io.InputStreamReader isr = new java.io.InputStreamReader(conn.getInputStream()); // 返回从此打开的连接读取的输入流。
   
6.         java.io.BufferedReader br = new java.io.BufferedReader(isr); // 创建一个使用默认大小输入缓冲区的缓冲字符输入流。
   
7. 
   
8.         String temp;
   
9.         StringBuffer html = new StringBuffer();
   
10.         while ((temp = br.readLine()) != null) { //按行读取输出流
    
11.             if (!temp.trim().equals("")) {
    
12.                 html.append(temp).append("\n"); //读完每行后换行
    
13.             }
    
14.         }
    
15.         br.close(); //关闭
    
16.         isr.close(); //关闭
    
17.         return html.toString(); //返回此序列中数据的字符串表示形式。
    
18.     } catch (Exception e) {
    
19.         e.printStackTrace();
    
20.         return null;
    
21.     }
    
22. }

复制代码