python按照l(shuí)ist中字典的某key去重的示例代碼
一、需求說(shuō)明
當(dāng)我們寫(xiě)爬蟲(chóng)的時(shí)候,經(jīng)常會(huì)遇到j(luò)son格式的數(shù)據(jù),它通常是如下結(jié)構(gòu):
data = [{'name':'小K','score':100}, {'name':'小J','score':98}, {'name':'小Q','score':95}, {'name':'小K','score':100}]
很顯然名字為小K的數(shù)據(jù)重復(fù)了,我們需要進(jìn)行去重。通常對(duì)于list的去重,我們可以用set()函數(shù),即:
data = list(set(data))
然而,運(yùn)行之后你會(huì)發(fā)現(xiàn)它報(bào)錯(cuò)了:
list里的數(shù)據(jù)不能是dict類型,那么該怎么辦呢?
二、我的解決方案
定義一個(gè)去重的函數(shù)即可,根據(jù)里面的某個(gè)key,對(duì)數(shù)據(jù)進(jìn)行篩選去重:
def DelRepeat(data,key): new_data = [] # 用于存儲(chǔ)去重后的list values = [] # 用于存儲(chǔ)當(dāng)前已有的值 for d in data: if d[key] not in values: new_data.append(d) values.append(d[key]) return new_data
參數(shù)data為需要去重的list,key為去重的?。窗凑漳膫€(gè)key來(lái)去重),去重后結(jié)果為:
[{'name': '小K', 'score': 100},
{'name': '小J', 'score': 98},
{'name': '小Q', 'score': 95}]
成功去重!
到此這篇關(guān)于python按照l(shuí)ist中字典的某key去重的示例代碼的文章就介紹到這了,更多相關(guān)python list字典的某key去重內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
使用Python的toolz庫(kù)開(kāi)始函數(shù)式編程的方法
這篇文章主要介紹了使用Python的toolz庫(kù)開(kāi)始函數(shù)式編程的方法,非常不錯(cuò),具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2018-11-11python3應(yīng)用windows api對(duì)后臺(tái)程序窗口及桌面截圖并保存的方法
今天小編就為大家分享一篇python3應(yīng)用windows api對(duì)后臺(tái)程序窗口及桌面截圖并保存的方法,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-08-08Python淘寶或京東等秒殺搶購(gòu)腳本實(shí)現(xiàn)(秒殺腳本)
本篇文章主要介紹了Python 通過(guò)selenium實(shí)現(xiàn)毫秒級(jí)自動(dòng)搶購(gòu)的示例代碼,通過(guò)掃碼登錄即可自動(dòng)完成一系列操作,搶購(gòu)時(shí)間精確至毫秒,可搶加購(gòu)物車等待時(shí)間結(jié)算的,也可以搶聚劃算、火車票等的商品,感興趣的朋友跟隨小編一起看看吧2022-10-10淺談Python3識(shí)別判斷圖片主要顏色并和顏色庫(kù)進(jìn)行對(duì)比的方法
這篇文章主要介紹了淺談Python3識(shí)別判斷圖片主要顏色并和顏色庫(kù)進(jìn)行對(duì)比的方法,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2019-10-10