利用Pandas求兩個dataframe差集的過程詳解
1、交集
intersected=pd.merge(df1,df2,how='inner')
延伸(針對列求交集)intersected=pd.merge(df1,df2,on['name'],how='inner')
2、差集(df1-df2為例)
diff=pd.concat([df1,df2,df2]).drop_duplicates(keep=False)
差集函數(shù)的詳解:
1、Pandas 通過 concat() 函數(shù)能夠輕松地將 Series 與 DataFrame 對象組合在一起,函數(shù)的語法格式如下: pd.concat(objs,axis=0,join='outer',join_axes=None,ignore_index=False)
2、需要對dataframe中的一列值有重復(fù)的,應(yīng)用drop_duplicates解決了此問題。
比如:
ata={"a":[1,1,2,4,3,9],"b":[2,2,3,5,5,10],"c":[3,4,5,6,6,11],"d":[4,5,6,7,8,12]} pd_data=pd.DataFrame(data=data) print(pd_data) t=pd_data.drop_duplicates(subset=['c','b'],keep='last',inplace=False) print(t)
說明:
keep='first'表示保留第一次出現(xiàn)的重復(fù)行,是默認(rèn)值。keep另外兩個取值為"last"和False,分別表示保留最后一次出現(xiàn)的重復(fù)行和去除所有重復(fù)行。
inplace=True表示直接在原來的DataFrame上刪除重復(fù)項,而默認(rèn)值False表示生成一個副本。如果要生成新的DataFrame:,inplace=False
subset要去重的列。subset=['c','b'],表示行中的記錄:c和b列都重復(fù)的。
3、將concat和drop_duplicates結(jié)合起來就解決了求差集的問題。
另外,還有一種方法也可以達(dá)到同樣的目的:
總結(jié)
到此這篇關(guān)于利用Pandas求兩個dataframe差集的文章就介紹到這了,更多相關(guān)Pandas求dataframe差集內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
- 詳解Pandas如何高效對比處理DataFrame的兩列數(shù)據(jù)
- pandas進(jìn)階教程之Dataframe的apply方法
- Python?pandas按行、按列遍歷DataFrame的幾種方式
- Python??處理?Pandas?DataFrame?中的行和列
- pandas中字典和dataFrame的相互轉(zhuǎn)換
- pandas?dataframe?drop函數(shù)介紹
- Python?Pandas?修改表格數(shù)據(jù)類型?DataFrame?列的順序案例
- Python Pandas實現(xiàn)DataFrame合并的圖文教程
- Pandas DataFrame操作數(shù)據(jù)增刪查改
相關(guān)文章
python技能之?dāng)?shù)據(jù)導(dǎo)出excel的實例代碼
本篇文章主要介紹了python技能之導(dǎo)出excel的實例代碼,小編覺得挺不錯的,現(xiàn)在分享給大家,也給大家做個參考。一起跟隨小編過來看看吧2017-08-08python 函數(shù)嵌套及多函數(shù)共同運(yùn)行知識點講解
在本篇文章里小編給各位整理的是一篇關(guān)于python 函數(shù)嵌套及多函數(shù)共同運(yùn)行知識點講解,需要的朋友們可以學(xué)習(xí)下。2020-03-03用Python將Excel數(shù)據(jù)導(dǎo)入到SQL Server的例子
今天小編就為大家分享一篇用Python將Excel數(shù)據(jù)導(dǎo)入到SQL Server的例子,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2019-08-08Python使用Selenium模塊實現(xiàn)模擬瀏覽器抓取淘寶商品美食信息功能示例
這篇文章主要介紹了Python使用Selenium模塊實現(xiàn)模擬瀏覽器抓取淘寶商品美食信息功能,涉及Python基于re模塊的正則匹配及selenium模塊的頁面抓取等相關(guān)操作技巧,需要的朋友可以參考下2018-07-07