快捷導(dǎo)航

python爬蟲之場(chǎng)內(nèi)ETF基金獲取

更新時(shí)間：2022年05月05日 16:43:39 作者：??斜月????

這篇文章主要介紹了python爬蟲之場(chǎng)內(nèi)ETF基金獲取，ETF?是一種場(chǎng)內(nèi)交易型基金，可以在盤中進(jìn)行交易，交易性比場(chǎng)外基金強(qiáng)一點(diǎn)，下文基于python的相關(guān)資料展開，需要的小伙伴可以參考一下

1 前言

之前已經(jīng)介紹了基金的變動(dòng)信息，但是這些基金都是屬于場(chǎng)外的，今天我們要介紹的是一個(gè)帶門檻的投資產(chǎn)品-ETF。只有開立證券賬戶的玩家才能入局，ETF 是一種場(chǎng)內(nèi)交易型基金，可以在盤中進(jìn)行交易，交易性比場(chǎng)外基金強(qiáng)一點(diǎn)，那么閑言少敘，馬上開始介紹正題。

2 ETF列表和簡(jiǎn)稱

ETF基金變動(dòng)情況和基本情況的獲取方式和場(chǎng)外基金是一樣的，怎么獲取比較全面的ETF基金列表呢？

# 獲取基金信息的列表
http://fund.eastmoney.com/data/fbsfundranking.html

以下是ETF信息列表所展示的信息：

ETF 在場(chǎng)內(nèi)進(jìn)行交易時(shí)，一般都有一個(gè)簡(jiǎn)稱，獲取簡(jiǎn)稱的方式比較麻煩一點(diǎn)，需要訪問(wèn)一個(gè)頁(yè)面，然后通過(guò) bs4 去解析元素的方式去獲取。

#經(jīng)過(guò)分析,我們可以發(fā)現(xiàn)基金代碼前綴就代表這其市場(chǎng),5上海市場(chǎng) 1-深圳市場(chǎng),以地產(chǎn)ETF和光伏ETF為例
http://quote.eastmoney.com/sz159707.html
http://quote.eastmoney.com/sh515790.html

3 ETF 信息獲取

3.1 ETF列表信獲取

ETF 列表信息我們通過(guò)訪問(wèn)列表發(fā)現(xiàn)在訪問(wèn)列表數(shù)據(jù)時(shí)，是請(qǐng)求了一個(gè)api接口到了后臺(tái)，然后返回給前端一個(gè)響應(yīng)報(bào)文。

http://fund.eastmoney.com/data/rankhandler.aspx?op=ph&dt=fb&ft=ct&rs=&gs=0&sc=zzf&st=desc&pi=1&pn=50

看到這里就覺得很開心，不用解析 html 文件了，當(dāng)通過(guò)request使用get 方式獲取數(shù)據(jù)時(shí)，發(fā)現(xiàn)竟然沒有返回?zé)o訪問(wèn)權(quán)限，我想可能是沒有攜帶cookie的原因，但是我也沒有登錄呀，可能是請(qǐng)求頭需要攜帶一些頁(yè)面信息，于是，經(jīng)過(guò)嘗試，最終確定了需要攜帶的信息為:

headers = {
    'Host': 'fund.eastmoney.com',
    'Referer': 'http://fund.eastmoney.com/data/fbsfundranking.html'
}

最終我們獲取基金列表的代碼應(yīng)該這樣寫:

調(diào)試后獲取到的結(jié)果如下圖所示:

3.2 獲取基金的簡(jiǎn)稱

獲取基金的簡(jiǎn)稱相對(duì)比較簡(jiǎn)單，通過(guò)分析發(fā)現(xiàn)，簡(jiǎn)稱所在的位置在 <span class="quote_title_0 wryh">光伏ETF</span> 中，通過(guò)訪問(wèn)頁(yè)面獲取元素即可拿到簡(jiǎn)稱的描述。

具體的代碼如下圖所示: