詳解pandas使用drop_duplicates去除DataFrame重復項參數(shù)
更新時間：2019年08月01日 11:12:45 作者：OraYang
這篇文章主要介紹了詳解pandas使用drop_duplicates去除DataFrame重復項參數(shù)，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧
Pandas之drop_duplicates：去除重復項
方法
DataFrame.drop_duplicates(subset=None, keep='first', inplace=False)
參數(shù)
這個drop_duplicate方法是對DataFrame格式的數(shù)據，去除特定列下面的重復行。返回DataFrame格式的數(shù)據。
- subset : column label or sequence of labels, optional 用來指定特定的列，默認所有列
- keep : {‘first', ‘last', False}, default ‘first' 刪除重復項并保留第一次出現(xiàn)的項
- inplace : boolean, default False 是直接在原來數(shù)據上修改還是保留一個副本
DataFrame中存在重復的行或者幾行中某幾列的值重復，這時候需要去掉重復行，示例如下：
data.drop_duplicates(subset=['A','B'],keep='first',inplace=True)
代碼中subset對應的值是列名，表示只考慮這兩列，將這兩列對應值相同的行進行去重。默認值為subset=None表示考慮所有列。
keep='first'表示保留第一次出現(xiàn)的重復行，是默認值。keep另外兩個取值為"last"和False，分別表示保留最后一次出現(xiàn)的重復行和去除所有重復行。
inplace=True表示直接在原來的DataFrame上刪除重復項，而默認值False表示生成一個副本。
將副本賦值給dataframe：
data=data.drop_duplicates(subset=None,keep='first',inplace=False)
這一行代碼與文章開頭提到的那行代碼效果等效，但是如果在該DataFrame上新增一列:
data['extra']=test_data['item_price_level']
就會報如下錯誤：
SettingWithCopyWarning: A value is trying to be set on a copy of a slice from a DataFrame.
所以如果想對DataFrame去重，最好采用開頭提到的那行代碼。
以上就是本文的全部內容，希望對大家的學習有所幫助，也希望大家多多支持腳本之家。
您可能感興趣的文章:
相關文章
教你用Python+selenium搭建自動化測試環(huán)境
今天給大家?guī)淼氖顷P于Python的相關知識,文章圍繞著如何用Python+selenium搭建自動化測試環(huán)境展開,文中有非常詳細的介紹,需要的朋友可以參考下2021-06-06
這篇文章主要介紹了Python正則抓取網易新聞的方法,結合實例形式較為詳細的分析了Python使用正則進行網易新聞抓取操作的相關實現(xiàn)技巧與注意事項,需要的朋友可以參考下2017-04-04
這篇文章主要介紹了Python實現(xiàn)網站文件的全備份和差異備份,需要的朋友可以參考下2014-11-11
這篇文章主要給大家介紹了關于Python保存圖片的3種情況,在Python中我們可以使用多種方法來保存圖片,包括使用Python內置的庫和第三方庫,需要的朋友可以參考下2023-10-10
es+flask搜索小項目實現(xiàn)分頁+高亮的示例代碼
本文主要介紹了es+flask搜索小項目實現(xiàn)分頁+高亮的示例代碼，文中通過示例代碼介紹的非常詳細，具有一定的參考價值，感興趣的小伙伴們可以參考一下2022-01-01
在使用Python的過程中，我最喜歡的就是Python的各種第三方庫，能夠完成很多操作。下面就給大家介紹5個通過 Python 構建的實戰(zhàn)項目，來實踐 Python 編程能力。歡迎收藏學習，喜歡點贊支持2021-11-11
這篇文章主要介紹了Python中NumPy的矩陣與通用函數(shù),Numpy是python的一種開源的數(shù)值計算擴展。這種工具可用來存儲和處理大型矩陣，比Python自身的嵌套列表結構要高效的多支持大量的維度數(shù)組與矩陣運算,需要的朋友可以參考下2023-07-07
這篇文章主要為大家詳細介紹了python爬取酷狗音樂排行榜，具有一定的參考價值，感興趣的小伙伴們可以參考一下2019-02-02
參數(shù)化就是把測試過程中的數(shù)據提取出來,通過參數(shù)傳遞不同的數(shù)據來驅動用例運行,這篇文章主要給大家介紹了關于Python基礎教程之pytest參數(shù)化的相關資料,文中通過實例代碼介紹的非常詳細,需要的朋友可以參考下2022-01-01
今天小編就為大家分享一篇解決pyCharm中 module 調用失敗的問題，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2020-02-02