pandas去除重復(fù)列的實(shí)現(xiàn)方法
數(shù)據(jù)準(zhǔn)備
假設(shè)我們目前有兩個數(shù)據(jù)表:
① 一個數(shù)據(jù)表是關(guān)于三個人他們的id以及其他的幾列屬性信息
import pandas as pd import numpy as np data = pd.DataFrame(np.random.randint(low=1,high=20,size=(3,4))) data['id'] = range(1,4) # 輸出:其中,最左邊的0 1 2 為其索引
② 另外一個數(shù)據(jù)表是3個用戶的app操作日志信息,一個人會有多條app操作記錄
sample = pd.DataFrame(np.random.randint(low=1,high=9,size=(7,1)),columns=['hhh']) sample['id'] = [1,1,2,2,3,3,3] # 輸出:
問題描述
① 首先我們需要統(tǒng)計每個用戶app操作記錄數(shù),比如上表可以看出用戶id為1的用戶有2條操作記錄,用戶id為3的用戶有3條操作記錄
s = sample.groupby('id').count() # 輸出:
② 此時,S是一個以id為索引,count出來的記錄數(shù)為value的Series結(jié)構(gòu)。因為考慮到后面我們需要id列進(jìn)行merge,所以我們需要讓id列從索引列變成真實(shí)的一列。
s = s.reset_index() # 輸出:
③ 將S與最上的data表進(jìn)行merge,我們不想要看到重復(fù)的id列,甚至我們也可以將問題延伸為S與data表不止是id列的重復(fù),還有好多條其他的列的重復(fù),那么如何保證將它們merge之后沒有重復(fù)列呢?
解決方案
第一想法是用 DataFrame.drop(‘列名') 或者用 del DataFrame[‘列名']
但是如果用該方法,會刪除掉所有的重復(fù)列,而達(dá)不到我們的要求。
辦法是: 參考StackOverflow解答
cols_to_use = s.columns.difference(data.columns) # pandas版本在0.15及之上的都可以用這種方法,該方法找出S和data表的不同列,然后再進(jìn)行merge pd.merge(data, s[cols_to_use], left_index=True, right_index=True, how='outer')
以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
10行Python代碼實(shí)現(xiàn)Web自動化管控的示例代碼
這篇文章主要介紹了10行Python代碼實(shí)現(xiàn)Web自動化管控的示例代碼,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-08-08python?pip?install總是報錯情況分析及解決辦法
這篇文章主要給大家介紹了關(guān)于python?pip?install總是報錯情況分析及解決辦法,安裝包時經(jīng)常遇到報錯,這里提供兩種方式解決,文中通過圖文介紹的非常詳細(xì),需要的朋友可以參考下2023-10-10Python中Scrapy+adbapi提高數(shù)據(jù)庫寫入效率實(shí)現(xiàn)
本文主要介紹了Python中Scrapy+adbapi提高數(shù)據(jù)庫寫入效率實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì),具有一定的參考價值,感興趣的小伙伴們可以參考一下2021-10-10python實(shí)現(xiàn)手機(jī)號歸屬地查詢功能
手機(jī)上突然收到了某銀行的短信提示,看了一下手機(jī)的位數(shù),正好是11位,我一想,這不就是標(biāo)準(zhǔn)的手機(jī)號碼嗎?于是想用python的庫實(shí)現(xiàn)查詢手機(jī)號碼歸屬地查詢自由,所以本文給大家介紹了如何用python實(shí)現(xiàn)手機(jī)號歸屬地查詢功能,需要的朋友可以參考下2024-03-03