快捷導(dǎo)航

python抓取某城市全部道路名稱信息

更新時(shí)間：2023年02月03日 09:44:04 作者：起不好名字就不起了

本文主要介紹了python抓取某城市全部道路名稱信息，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧

引子

這兩天碰到一個(gè)需求，要獲取某個(gè)城市所有道路的車輛通行速度。首先自然是想到用高德或百度的Web服務(wù) API 來(lái)請(qǐng)求交通路況信息，結(jié)果一看高德的交通態(tài)勢(shì)服務(wù)API從2020年12月31日起就下線了，遂轉(zhuǎn)而奔向百度，百度的實(shí)時(shí)路況查詢服務(wù)倒是還能用，但是在使用上確有許多限制，主要是檢索限定范圍太小，無(wú)法通過(guò)直接設(shè)置矩形范圍查詢區(qū)域內(nèi)所有道路路況信息，最終想到如果能獲取該城市的所有道路名稱信息，直接根據(jù)道路名去請(qǐng)求接口，就能又準(zhǔn)又全的采集所有道路通行狀況數(shù)據(jù)。所以，就有了本次標(biāo)題的目標(biāo)：怎么獲取城市全部道路名稱信息？

思路

在網(wǎng)上一番檢索，并未直接找到有收錄城市所有道路名的網(wǎng)站，還是太天真了。最終還是選擇了從百度自身下手，百度Web服務(wù)是提供POI檢索的，道路也算是POI的一種，所以可以通過(guò)這種曲線救國(guó)的方式，來(lái)實(shí)現(xiàn)道路名稱信息的抓取，具體步驟如下：

1.確定檢索范圍，也就是待查詢區(qū)域的經(jīng)緯度邊界，這個(gè)可以網(wǎng)上搜。如果有對(duì)應(yīng)區(qū)域的地理空間數(shù)據(jù)，也可以在ArcGIS內(nèi)以查看坐標(biāo)信息的形式獲取經(jīng)緯度。
2.確定檢索形式，百度提供行政區(qū)劃區(qū)域檢索、圓形區(qū)域檢索、矩形區(qū)域檢索、地點(diǎn)詳情檢索四種POI檢索形式，最理想的是矩形區(qū)域檢索，但該檢索功能已不再免費(fèi)對(duì)外開(kāi)放，所以退而求其次，選擇圓形區(qū)域檢索，盡可能多的獲取道路相關(guān)POI信息。
3.確定檢索步長(zhǎng)，圓形檢索是通過(guò)設(shè)定好中心坐標(biāo)點(diǎn)，并按設(shè)定半徑來(lái)請(qǐng)求該圓形區(qū)域內(nèi)的所有道路名稱，由于半徑不可能無(wú)限延伸，所以要把第一步確定的矩形范圍分解成多個(gè)小圓形范圍，來(lái)分批次請(qǐng)求檢索結(jié)果。
4.編寫(xiě)實(shí)現(xiàn)代碼，代碼實(shí)現(xiàn)過(guò)程比較簡(jiǎn)單，需要主要是獲取道路信息后逐一保存。

實(shí)現(xiàn)

實(shí)現(xiàn)代碼如下，寫(xiě)的比較糙，不過(guò)能用。

f = open('F:\\路名信息.json', 'w+')
#經(jīng)緯度范圍設(shè)置，按每次偏移兩公里來(lái)移動(dòng)檢索圓心
for lat in np.arange(30.895038,31.424064,0.02):
? ? ? ? for long in np.arange(107.183609,107.800848,0.02):
? ? ? ? ? ? latstr=str(lat)
? ? ? ? ? ? longstr=str(long)
? ? ? ? ? ? bounds=latstr+','+longstr
? ? ? ? ? ? #query的參數(shù)值設(shè)為道路，檢索半徑設(shè)置為2公里
? ? ? ? ? ? api= "http://api.map.baidu.com/place/v2/search?query=道路&location={0}&radius=2000&output=json&ak={你的開(kāi)發(fā)者秘鑰}".format(bounds)
? ? ? ? ? ? r = requests.get(api, headers={'User-Agent': 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)','Connection': 'close'}, timeout=(5, 5))
? ? ? ? ? ? try:
? ? ? ? ? ? ? ? result=r.json()
? ? ? ? ? ? ? ? #是否成功返回結(jié)果
? ? ? ? ? ? ? ? if result['status'] == 0:
? ? ? ? ? ? ? ? ? ? #是否包含路況信息
? ? ? ? ? ? ? ? ? ? results = result['results']
? ? ? ? ? ? ? ? ? ? if len(results) != 0:
? ? ? ? ? ? ? ? ? ? ? ? for road in results:
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? #每條路的json文件單獨(dú)保存
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? print(json.dumps(road, ensure_ascii=False))
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? f.write(json.dumps(road, ensure_ascii=False,indent=4))

? ? ? ? ? ? except:
? ? ? ? ? ? ? ? print('哇塞，出錯(cuò)了')
? ? ? ? ? ? ? ? continue
f.close()

結(jié)果

最后請(qǐng)求得到的道路信息類似如下格式，可以看到當(dāng)我們以道路作為檢索關(guān)鍵字來(lái)請(qǐng)求POI時(shí)，確實(shí)能夠獲取道路的詳細(xì)信息，但是也有一些非標(biāo)準(zhǔn)道路名稱結(jié)果被檢索到，比如某某路口這種。所以，如果再對(duì)數(shù)據(jù)做一遍清洗修正，應(yīng)該能得到更多道路名稱信息?？傊ㄟ^(guò)POI這種形式來(lái)獲取城市所有道路名是有一定可操作性的，但在數(shù)據(jù)的全量性上還沒(méi)法完全保證，需要進(jìn)一步優(yōu)化該方法，以后有時(shí)間再研究研究。

{
        "name": "踏水橋",
        "location": {
            "lat": 30.908352,
            "lng": 107.244304
        },
        "address": "四川省達(dá)州市大竹縣",
        "province": "四川省",
        "city": "達(dá)州市",
        "area": "大竹縣",
        "detail": 0,
        "uid": "ce658bf70958ecccda13183b"
},
{
        "name": "華農(nóng)街/將軍西街(路口)",
        "location": {
            "lat": 30.90876,
            "lng": 107.241049
        },
        "address": "達(dá)州市大竹縣X168",
        "province": "四川省",
        "city": "達(dá)州市",
        "area": "大竹縣",
        "detail": 1,
        "uid": "2355baab46ba127551e5c541"
},
{
        "name": "將軍西街",
        "location": {
            "lat": 30.911387,
            "lng": 107.243157
        },
        "address": "四川省達(dá)州市大竹縣",
        "province": "四川省",
        "city": "達(dá)州市",
        "area": "大竹縣",
        "detail": 0,
        "uid": "09979f7c1c1aa5cb09f5eb47"
},
......

到此這篇關(guān)于python抓取某城市全部道路名稱信息的文章就介紹到這了,更多相關(guān)python抓取道路信息內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: