欧美bbbwbbbw肥妇,免费乱码人妻系列日韩,一级黄片

JAVA超級(jí)簡(jiǎn)單的爬蟲(chóng)實(shí)例講解

 更新時(shí)間:2017年10月30日 08:28:41   作者:C_凱  
下面小編就為大家?guī)?lái)一篇JAVA超級(jí)簡(jiǎn)單的爬蟲(chóng)實(shí)例講解。小編覺(jué)得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過(guò)來(lái)看看吧

爬取整個(gè)頁(yè)面的數(shù)據(jù),并進(jìn)行有效的提取信息,注釋都有就不廢話(huà)了:

public class Reptile {
 
 public static void main(String[] args) {  
 String url1="";   //傳入你所要爬取的頁(yè)面地址
 InputStream is=null;  //創(chuàng)建輸入流用于讀取流
 BufferedReader br=null; //包裝流,加快讀取速度
 StringBuffer html=new StringBuffer(); //用來(lái)保存讀取頁(yè)面的數(shù)據(jù).
 String temp=""; //創(chuàng)建臨時(shí)字符串用于保存每一次讀的一行數(shù)據(jù),然后html調(diào)用append方法寫(xiě)入temp;
 try {
  URL url2 = new URL(url1); //獲取URL;
  is = url2.openStream(); //打開(kāi)流,準(zhǔn)備開(kāi)始讀取數(shù)據(jù);
  br= new BufferedReader(new InputStreamReader(is)); //將流包裝成字符流,調(diào)用br.readLine()可以提高讀取效率,每次讀取一行;
  while ((temp = br.readLine()) != null) {//讀取數(shù)據(jù),調(diào)用br.readLine()方法每次讀取一行數(shù)據(jù),并賦值給temp,如果沒(méi)數(shù)據(jù)則值==null,跳出循環(huán);
  html.append(temp); //將temp的值追加給html,這里注意的時(shí)String跟StringBuffere的區(qū)別前者不是可變的后者是可變的;
  }
  //System.out.println(html); //打印出爬取頁(yè)面的全部代碼;
  if(is!=null)  //接下來(lái)是關(guān)閉流,防止資源的浪費(fèi);
  {
   is.close();
   is=null;
  }
  Document doc=Jsoup.parse(html.toString()); //通過(guò)Jsoup解析頁(yè)面,生成一個(gè)document對(duì)象;
  Elements elements=doc.getElementsByClass("XX");//通過(guò)class的名字得到(即XX),一個(gè)數(shù)組對(duì)象Elements里面有我們想要的數(shù)據(jù),至于這個(gè)div的值呢你打開(kāi)瀏覽器按下F12就知道了;
  for (Element element:elements) {
   System.out.println(element.text()); //打印出每一個(gè)節(jié)點(diǎn)的信息;你可以選擇性的保留你想要的數(shù)據(jù),一般都是獲取個(gè)固定的索引;  
  }   
 } catch (MalformedURLException e) {
  // TODO Auto-generated catch block
  e.printStackTrace();
 } catch (IOException e) {
  // TODO Auto-generated catch block
  e.printStackTrace();
 }
 
 
 
}

上一張自己爬取的圖片,并用fusioncharts生成報(bào)表(一般抓取的是int類(lèi)型的數(shù)據(jù)的話(huà),生成報(bào)表可以很直觀)

以上這篇JAVA超級(jí)簡(jiǎn)單的爬蟲(chóng)實(shí)例講解就是小編分享給大家的全部?jī)?nèi)容了,希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。

相關(guān)文章

最新評(píng)論