Python正則抓取新聞標題和鏈接的方法示例
本文實例講述了Python正則抓取新聞標題和鏈接的方法。分享給大家供大家參考,具體如下:
#-*-coding:utf-8-*-
import re
from urllib import urlretrieve
from urllib import urlopen
#獲取網(wǎng)頁信息
doc = urlopen("http://www.i#cn/news/").read() #自己找的一個大數(shù)據(jù)的新聞網(wǎng)站
#抓取新聞標題和鏈接
def extract_title(info):
pat = '<h3><a target=\"_blank\"(.*?)</a></h3>'
title = re.findall(pat, info)
titles='\n'.join(title)
#print titles
#修改指定字符串
titles1=titles.replace('class="title"','title')
titles2=titles1.replace('>',':')
titles3=titles2.replace('href','url:')
titles4=titles3.replace('="/','"http://www.i#cn/')
#寫入文件
save=open('xinwen.txt','w')
save.write(titles4)
save.close()
titles = extract_title(doc)
PS:這里再為大家提供2款非常方便的正則表達式工具供大家參考使用:
JavaScript正則表達式在線測試工具:
http://tools.jb51.net/regex/javascript
正則表達式在線生成工具:
http://tools.jb51.net/regex/create_reg
更多關于Python相關內容可查看本站專題:《Python正則表達式用法總結》、《Python數(shù)據(jù)結構與算法教程》、《Python Socket編程技巧總結》、《Python函數(shù)使用技巧總結》、《Python字符串操作技巧匯總》、《Python入門與進階經(jīng)典教程》及《Python文件與目錄操作技巧匯總》
希望本文所述對大家Python程序設計有所幫助。
- python3爬蟲之入門基礎和正則表達式
- 零基礎寫python爬蟲之神器正則表達式
- Python的爬蟲包Beautiful Soup中用正則表達式來搜索
- Python爬蟲正則表達式常用符號和方法
- python爬蟲 正則表達式使用技巧及爬取個人博客的實例講解
- python正則表達式爬取貓眼電影top100
- Python使用正則表達式抓取網(wǎng)頁圖片的方法示例
- python正則匹配抓取豆瓣電影鏈接和評論代碼分享
- Python爬蟲實現(xiàn)網(wǎng)頁信息抓取功能示例【URL與正則模塊】
- python正則表達式抓取成語網(wǎng)站
- Python正則抓取網(wǎng)易新聞的方法示例
- Python3使用正則表達式爬取內涵段子示例
相關文章
使用Python進行SSH和文件傳輸實現(xiàn)方法實例
這篇文章主要為大家介紹了使用Python進行SSH和文件傳輸實現(xiàn)方法實例,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-12-12
Python字典數(shù)據(jù)對象拆分的簡單實現(xiàn)方法
這篇文章主要介紹了Python字典數(shù)據(jù)對象拆分的簡單實現(xiàn)方法,涉及Python針對字典數(shù)據(jù)的相關遍歷、拆分等操作技巧,需要的朋友可以參考下2017-12-12
python-opencv 將連續(xù)圖片寫成視頻格式的方法
今天小編就為大家分享一篇python-opencv 將連續(xù)圖片寫成視頻格式的方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2019-01-01
python基于pygame實現(xiàn)飛機大作戰(zhàn)小游戲
這篇文章主要為大家詳細介紹了python基于pygame實現(xiàn)飛機大作戰(zhàn)小游戲,文中示例代碼介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下2020-11-11
Python利用pyHook實現(xiàn)監(jiān)聽用戶鼠標與鍵盤事件
這篇文章主要介紹了Python利用pyHook實現(xiàn)監(jiān)聽用戶鼠標與鍵盤事件,很有實用價值的一個技巧,需要的朋友可以參考下2014-08-08
python計算書頁碼的統(tǒng)計數(shù)字問題實例
這篇文章主要介紹了python計算書頁碼的統(tǒng)計數(shù)字問題實例,對比2個實例講述了數(shù)字統(tǒng)計的技巧,非常實用,需要的朋友可以參考下2014-09-09

