Python實現(xiàn)提取谷歌音樂搜索結(jié)果的方法
本文實例講述了Python實現(xiàn)提取谷歌音樂搜索結(jié)果的方法。分享給大家供大家參考。具體如下:
Python的簡單腳本,用于提取谷歌音樂搜索頁面中的歌曲信息,包括歌曲名,作者,專輯名,現(xiàn)在鏈接等,最多只提取10頁結(jié)果。
#! /usr/bin/env python #coding=utf-8 ''' Created on 2011-8-19 @author: yaoboyuan ''' from urllib import request,parse import re,sys def extractSongRawData(text): '抓取每一首歌的原始數(shù)據(jù)' text = re.sub('\n+','',text) songList = re.findall('\<tbody.*?\</tbody>',text) nums = len(songList) print('search ' + str(nums) + ' songs') return songList def translate(text): '去掉text中的無用字符,轉(zhuǎn)換unicode碼' text = re.sub('\<b>','',text) text = re.sub('\</b>','',text) #find the 成 and translate into chinese s = re.findall('&#([0-9]+);',text) if len(s)<=0: return text else: text = '' for i in range(len(s)): value = int(s[i],10) #from str'123' to 10 base's int 124 text += chr(value) #from value to char return text def extractSongName(song): '提取歌曲名字' td = re.findall('(?:\<td class\="Title).*(?:\</td>)',song) name = re.findall('.+?\<a.+?>(.*?)\</a>',td[0]) songName = translate(name[0]) return songName def extractAuthorName(song): '提取作者名字' td = re.findall('(?:\<td class\="Artist).*(?:\</td>)',song) name = re.findall('.+?\<a.+?>(.*?)\</a>',td[0]) authorName = name[0] authorName = translate(authorName) return authorName def extrackAlbumName(song): '提取專輯名字' td = re.findall('(?:\<td class\="Album).*(?:\</td>)',song) name = re.findall('.+?\<a.+?>(.*?)\</a>',td[0]) albumName = translate(name[0]) return albumName def extractID(song): '提取歌曲id' td = re.findall('''\<tbody id\="([a-zA-Z0-9]+)"''',song) if len(td)>0: return td[0] else: return song def extractLink(song): '提取歌曲下載鏈接' td = re.findall('''\<td class\="Icon.*?(?=title\="下載").*?onclick\="(.*?)>''',song) if len(td) == 0: return 'NULL' s = str(td[0]) rawLink = re.findall('http.*?(?=\?)',s) if len(rawLink) == 0: return s link = rawLink[0] link = re.sub('%3D','=',link) id = extractID(song) return link + '?id=' + id def extractPageNums(text): '提取返回結(jié)果的頁數(shù),最多要10頁' pageList = re.findall('page_link',text) return len(pageList) def extractSongInfo(song): '提取歌曲信息,返回歌曲列表' songList = [] for i in range(len(song)): songName = extractSongName(song[i]) authorName = extractAuthorName(song[i]) albumName = extrackAlbumName(song[i]) link = extractLink(song[i]) songItem = [songName,authorName,albumName,link] songList.append(songItem) index = '' if i<9: index = '0' + str(i+1) else: index = str(i + 1) #print(index + ' ' + songName + ' ' + authorName + ' ' + albumName + ' ' + link) return songList def main(): while True: url = 'http://www.google.cn/music/search?q=' key = input('請輸入歌曲名字或關(guān)鍵字:') key = parse.quote(key) #統(tǒng)一編碼成utf-8 url += key mf = request.urlopen(url) c = mf.readall() c = str(c,encoding = 'utf-8') num = extractPageNums(c) print(str(num+1) + ' pages found') song = extractSongRawData(c) songList = extractSongInfo(song) #if the result great than 2 pages, then request all pages if num>0: for i in range(num): start = (i+1)*20 next_page = '&cat=song&start=%d'%(start) #next_page = parse.quote(next_page) #統(tǒng)一編碼成utf-8 url += next_page mf = request.urlopen(url) c = mf.readall() c = str(c,encoding = 'utf-8') song = extractSongRawData(c) songList += extractSongInfo(song) #find all results for i in range(len(songList)): #print the result index = '' if i<9: index = '0' + str(i+1) else: index = str(i + 1) print(index + ' ' + str(songList[i])) if __name__ == '__main__': main()
希望本文所述對大家的Python程序設(shè)計有所幫助。
相關(guān)文章
Django學(xué)習(xí)之靜態(tài)文件與模板詳解
這篇文章主要為大家詳細介紹了Django靜態(tài)文件與模板,使用數(shù)據(jù)庫,文中示例代碼介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下2022-02-022023年最新版Python?3.12.0安裝使用指南(推薦!)
這篇文章主要給大家介紹了關(guān)于2023年最新版Python?3.12.0安裝使用的相關(guān)資料,Python?現(xiàn)在是非常流行的編程語言,當(dāng)然并不是說Python語言性能多么強大,而是Python使用非常方便,特別是現(xiàn)在AI和大數(shù)據(jù)非常流行,用?Python?實現(xiàn)是非常容易的,需要的朋友可以參考下2023-10-10Python利用pymupdf實現(xiàn)簡單的PDF閱讀器
這篇文章主要為大家詳細介紹了Python如何利用pymupdf實現(xiàn)簡單的PDF閱讀器,并展示了PDF文件的內(nèi)容,文中的示例代碼講解詳細,需要的可以了解一下2023-08-08python3實現(xiàn)mysql導(dǎo)出excel的方法
這篇文章主要介紹了python3實現(xiàn)mysql導(dǎo)出excel的方法,本文通過實例代碼給大家介紹的非常詳細,具有一定的參考借鑒價值 ,需要的朋友可以參考下2019-07-07基于numpy.random.randn()與rand()的區(qū)別詳解
下面小編就為大家分享一篇基于numpy.random.randn()與rand()的區(qū)別詳解,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-04-04