python獲取指定網(wǎng)頁上所有超鏈接的方法
更新時間:2015年04月04日 12:57:23 作者:令狐不聰
這篇文章主要介紹了python獲取指定網(wǎng)頁上所有超鏈接的方法,涉及Python使用urllib2模塊操作網(wǎng)頁抓取的技巧,非常具有實用價值,需要的朋友可以參考下
本文實例講述了python獲取指定網(wǎng)頁上所有超鏈接的方法。分享給大家供大家參考。具體如下:
這段python代碼通過urllib2抓取網(wǎng)頁,然后通過簡單的正則表達式分析網(wǎng)頁上的全部url地址
import urllib2 import re #connect to a URL website = urllib2.urlopen(url) #read html code html = website.read() #use re.findall to get all the links links = re.findall('"((http|ftp)s?://.*?)"', html) print links
希望本文所述對大家的python程序設計有所幫助。
相關文章
Python pandas如何向excel添加數(shù)據(jù)
這篇文章主要介紹了Python pandas如何向excel添加數(shù)據(jù),文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-05-05django 前端頁面如何實現(xiàn)顯示前N條數(shù)據(jù)
這篇文章主要介紹了django 前端頁面如何實現(xiàn)顯示前N條數(shù)據(jù)。具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-03-03基于python實現(xiàn)模擬數(shù)據(jù)結(jié)構(gòu)模型
這篇文章主要介紹了基于python實現(xiàn)模擬數(shù)據(jù)結(jié)構(gòu)模型,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2020-06-06Python常見字符串操作函數(shù)小結(jié)【split()、join()、strip()】
這篇文章主要介紹了Python常見字符串操作函數(shù),結(jié)合實例形式總結(jié)分析了split()、join()及strip()的常見使用技巧與注意事項,需要的朋友可以參考下2018-02-02Python爬取股票信息,并可視化數(shù)據(jù)的示例
這篇文章主要介紹了Python爬取股票信息,并可視化數(shù)據(jù)的示例,幫助大家更好的理解和使用python爬蟲,感興趣的朋友可以了解下2020-09-09