利用Python?爬取股票實時數(shù)據(jù)詳情
東方財富網(wǎng)地址如下：
http://quote.eastmoney.com/center/gridlist.html#hs_a_board
我們通過點擊該網(wǎng)站的下一頁發(fā)現(xiàn)，網(wǎng)頁內(nèi)容有變化，但是網(wǎng)站的 URL 卻不變，也就是說這里使用了 Ajax 技術(shù)，動態(tài)從服務器拉取數(shù)據(jù)，這種方式的好處是可以在不重新加載整幅網(wǎng)頁的情況下更新部分數(shù)據(jù)，減輕網(wǎng)絡(luò)負荷，加快頁面加載速度。
我們通過 F12 來查看網(wǎng)絡(luò)請求情況，可以很容易的發(fā)現(xiàn)，網(wǎng)頁上的數(shù)據(jù)都是通過如下地址請求的
http://38.push2.eastmoney.com/api/qt/clist/get?cb=jQuery112409036039385296142_1658838397275&pn=3&pz=20&po=1&np=1&ut=bd1d9ddb04089700cf9c27f6f7426281&fltt=2&invt=2&wbp2u=|0|0|0|web&fid=f3&fs=m:0+t:6,m:0+t:80,m:1+t:2,m:1+t:23,m:0+t:81+s:2048&fields=f1,f2,f3,f4,f5,f6,f7,f8,f9,f10,f12,f13,f14,f15,f16,f17,f18,f20,f21,f23,f24,f25,f22,f11,f62,f128,f136,f115,f152&_=1658838404848
接下來我們多請求幾次，來觀察該地址的變化情況，發(fā)現(xiàn)其中的pn參數(shù)代表這頁數(shù)，于是，我們可以通過修改&pn=后面的數(shù)字來訪問不同頁面對應的數(shù)據(jù)
import requests json_url = "http://48.push2.eastmoney.com/api/qt/clist/get?cb=jQuery112402508937289440778_1658838703304&pn=1&pz=20&po=1&np=1&ut=bd1d9ddb04089700cf9c27f6f7426281&fltt=2&invt=2&wbp2u=|0|0|0|web&fid=f3&fs=m:0+t:6,m:0+t:80,m:1+t:2,m:1+t:23,m:0+t:81+s:2048&fields=f1,f2,f3,f4,f5,f6,f7,f8,f9,f10,f12,f13,f14,f15,f16,f17,f18,f20,f21,f23,f24,f25,f22,f11,f62,f128,f136,f115,f152&_=1658838703305" res = requests.get(json_url)
數(shù)據(jù)處理 接下來我們觀察返回的數(shù)據(jù)，可以看出數(shù)據(jù)并不是標準的 json 數(shù)據(jù)
于是我們先進行 json 化：
result = res.text.split("jQuery112402508937289440778_1658838703304")[1].split("(")[1].split(");")[0]
result_json = json.loads(result)
result_jsonOutput:
返回各參數(shù)對應含義：
- f2：最新價
- f3：漲跌幅
- f4：漲跌額
- f5：成交量（手）
- f6：成交額
- f7：振幅
- f8：換手率
- f9：市盈率
- f10：量比
- f12：股票代碼
- f14：股票名稱
- f15：最高
- f16：最低
- f17：今開
- f18：昨收
- f22：市凈率
先準備一個存儲函數(shù)
def save_data(data, date):
if not os.path.exists(r'stock_data_%s.csv' % date):
with open("stock_data_%s.csv" % date, "a+", encoding='utf-8') as f:
f.write("股票代碼,股票名稱,最新價,漲跌幅,漲跌額,成交量（手）,成交額,振幅,換手率,市盈率,量比,最高,最低,今開,昨收,市凈率\n")
for i in data:
Code = i["f12"]
Name = i["f14"]
Close = i['f2']
ChangePercent = i["f3"]
Change = i['f4']
Volume = i['f5']
Amount = i['f6']
Amplitude = i['f7']
TurnoverRate = i['f8']
PERation = i['f9']
VolumeRate = i['f10']
Hign = i['f15']
Low = i['f16']
Open = i['f17']
PreviousClose = i['f18']
PB = i['f22']
row = '{},{},{},{},{},{},{},{},{},{},{},{},{},{},{},{}'.format(
Code,Name,Close,ChangePercent,Change,Volume,Amount,Amplitude,
TurnoverRate,PERation,VolumeRate,Hign,Low,Open,PreviousClose,PB)
f.write(row)
f.write('\n')
else:
...然后再把前面處理好的 json 數(shù)據(jù)傳入：
stock_data = result_json['data']['diff'] save_data(stock_data, '2022-07-28')
這樣我們就得到了第一頁的股票數(shù)據(jù)：
最后我們只需要循環(huán)抓取所有網(wǎng)頁即可：
for i in range(1, 5):
print("抓取網(wǎng)頁%s" % str(i))
url = "http://48.push2.eastmoney.com/api/qt/clist/get?cb=jQuery112402508937289440778_1658838703304&pn=%s&pz=20&po=1&np=1&ut=bd1d9ddb04089700cf9c27f6f7426281&fltt=2&invt=2&wbp2u=|0|0|0|web&fid=f3&fs=m:0+t:6,m:0+t:80,m:1+t:2,m:1+t:23,m:0+t:81+s:2048&fields=f1,f2,f3,f4,f5,f6,f7,f8,f9,f10,f12,f13,f14,f15,f16,f17,f18,f20,f21,f23,f24,f25,f22,f11,f62,f128,f136,f115,f152&_=1658838703305" % str(i)
res = requests.get(json_url)
result = res.text.split("jQuery112402508937289440778_1658838703304")[1].split("(")[1].split(");")[0]
result_json = json.loads(result)
stock_data = result_json['data']['diff']
save_data(stock_data, '2022-07-28')這樣我們就完成了整個股票數(shù)據(jù)的抓取，
到此這篇關(guān)于利用Python 爬取股票實時數(shù)據(jù)詳情的文章就介紹到這了,更多相關(guān) Python 爬取股票數(shù)據(jù)內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！
相關(guān)文章
這篇文章主要為大家詳細介紹了wxPython實現(xiàn)列表增刪改查功能，文中示例代碼介紹的非常詳細，具有一定的參考價值，感興趣的小伙伴們可以參考一下2019-11-11
python+pygame實現(xiàn)簡易五子棋小游戲的三種方式
這篇文章主要介紹了使用python實現(xiàn)簡易五子棋小游戲,文中提供了三種實現(xiàn)方式,解決思路和部分實現(xiàn)代碼,感興趣的朋友可以參考下2023-03-03
python數(shù)據(jù)結(jié)構(gòu)鏈表之單向鏈表(實例講解)
下面小編就為大家?guī)硪黄猵ython數(shù)據(jù)結(jié)構(gòu)鏈表之單向鏈表(實例講解)。小編覺得挺不錯的，現(xiàn)在就分享給大家，也給大家做個參考。一起跟隨小編過來看看吧2017-07-07
Python遠程linux執(zhí)行命令實現(xiàn)
這篇文章主要介紹了Python遠程linux執(zhí)行命令實現(xiàn)，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2020-11-11
今天小編就為大家分享一篇使用Python彈窗時刻提醒你減肥的小程序代碼，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2021-09-09
這篇文章主要介紹了Python中集合類型（set）學習小結(jié),本文講解了set的初始化、運算操作、基本方法等內(nèi)容,需要的朋友可以參考下2015-01-01
今天小編就為大家分享一篇PyTorch 對應點相乘、矩陣相乘實例，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-12-12
