JSP抓取網(wǎng)頁代碼的程序
更新時(shí)間:2006年10月13日 00:00:00 作者:
<%@ page contentType="text/html;charset=gb2312"%>
<%
String sCurrentLine;
String sTotalString;
sCurrentLine="";
sTotalString="";
java.io.InputStream l_urlStream;
java.net.URL l_url = new java.net.URL("http://www.163.net/");
java.net.HttpURLConnection l_connection = (java.net.HttpURLConnection) l_url.openConnection();
l_connection.connect();
l_urlStream = l_connection.getInputStream();
java.io.BufferedReader l_reader = new java.io.BufferedReader(new java.io.InputStreamReader(l_urlStream));
while ((sCurrentLine = l_reader.readLine()) != null)
{
sTotalString+=sCurrentLine;
}
out.println(sTotalString);
%>
后記
雖然代碼比較簡(jiǎn)單,但是,我認(rèn)為根據(jù)這個(gè),可以實(shí)現(xiàn)“網(wǎng)絡(luò)爬蟲”的功能,比如從頁面找href連接,然后再得到那個(gè)連接,然后再“抓”,不停止地(當(dāng)然可以限定層數(shù)),這樣,可以實(shí)現(xiàn)“網(wǎng)頁搜索”功能。
<%
String sCurrentLine;
String sTotalString;
sCurrentLine="";
sTotalString="";
java.io.InputStream l_urlStream;
java.net.URL l_url = new java.net.URL("http://www.163.net/");
java.net.HttpURLConnection l_connection = (java.net.HttpURLConnection) l_url.openConnection();
l_connection.connect();
l_urlStream = l_connection.getInputStream();
java.io.BufferedReader l_reader = new java.io.BufferedReader(new java.io.InputStreamReader(l_urlStream));
while ((sCurrentLine = l_reader.readLine()) != null)
{
sTotalString+=sCurrentLine;
}
out.println(sTotalString);
%>
后記
雖然代碼比較簡(jiǎn)單,但是,我認(rèn)為根據(jù)這個(gè),可以實(shí)現(xiàn)“網(wǎng)絡(luò)爬蟲”的功能,比如從頁面找href連接,然后再得到那個(gè)連接,然后再“抓”,不停止地(當(dāng)然可以限定層數(shù)),這樣,可以實(shí)現(xiàn)“網(wǎng)頁搜索”功能。
相關(guān)文章
JavaWeb Servlet中url-pattern的使用
這篇文章主要介紹了JavaWeb Servlet中url-pattern的使用的相關(guān)資料,希望通過本文能幫助到大家,讓大家學(xué)習(xí)理解這部分內(nèi)容,需要的朋友可以參考下2017-10-10jsp中如何實(shí)現(xiàn)按下回車鍵自動(dòng)提交表單
當(dāng)提交form表單數(shù)據(jù)時(shí)直接觸發(fā)回車鍵,就可以提交表單。為了省事很多時(shí)候希望可以按回車鍵來提交表單,要控制這些行為,可以借助JS來達(dá)到要求。2016-10-10EJB3.0部署消息驅(qū)動(dòng)Bean拋javax.naming.NameNotFoundException異常
這篇文章主要為大家詳細(xì)介紹了EJB3.0部署消息驅(qū)動(dòng)Bean拋javax.naming.NameNotFoundException異常,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2017-11-11JSP程序運(yùn)行原理、文檔結(jié)構(gòu)及簡(jiǎn)單輸入輸出實(shí)例分析
這篇文章主要介紹了JSP程序運(yùn)行原理、文檔結(jié)構(gòu)及簡(jiǎn)單輸入輸出,以完整實(shí)例形式較為詳細(xì)的分析了JSP程序的運(yùn)行原理、文檔結(jié)構(gòu)及簡(jiǎn)單輸入輸出詳細(xì)技巧,具有一定參考借鑒價(jià)值,需要的朋友可以參考下2015-09-09