詳解pandas數(shù)據(jù)合并與重塑(pd.concat篇)
1 concat
concat函數(shù)是在pandas底下的方法,可以將數(shù)據(jù)根據(jù)不同的軸作簡單的融合
pd.concat(objs, axis=0, join='outer', join_axes=None, ignore_index=False, keys=None, levels=None, names=None, verify_integrity=False)
參數(shù)說明
- objs: series,dataframe或者是panel構(gòu)成的序列l(wèi)sit
- axis: 需要合并鏈接的軸,0是行,1是列
- join:連接的方式 inner,或者outer
其他一些參數(shù)不常用,用的時候再補上說明。
1.1 相同字段的表首尾相接
# 現(xiàn)將表構(gòu)成list,然后在作為concat的輸入 In [4]: frames = [df1, df2, df3] In [5]: result = pd.concat(frames)
要在相接的時候在加上一個層次的key來識別數(shù)據(jù)源自于哪張表,可以增加key參數(shù)
In [6]: result = pd.concat(frames, keys=['x', 'y', 'z'])
效果如下
1.2 橫向表拼接(行對齊)
1.2.1 axis
當axis = 1的時候,concat就是行對齊,然后將不同列名稱的兩張表合并
In [9]: result = pd.concat([df1, df4], axis=1)
1.2.2 join
加上join參數(shù)的屬性,如果為'inner'得到的是兩表的交集,如果是outer,得到的是兩表的并集。
In [10]: result = pd.concat([df1, df4], axis=1, join='inner')
1.2.3 join_axes
如果有join_axes的參數(shù)傳入,可以指定根據(jù)那個軸來對齊數(shù)據(jù)
例如根據(jù)df1表對齊數(shù)據(jù),就會保留指定的df1表的軸,然后將df4的表與之拼接
In [11]: result = pd.concat([df1, df4], axis=1, join_axes=[df1.index])
1.3 append
append是series和dataframe的方法,使用它就是默認沿著列進行憑借(axis = 0,列對齊)
In [12]: result = df1.append(df2)
1.4 無視index的concat
如果兩個表的index都沒有實際含義,使用ignore_index參數(shù),置true,合并的兩個表就睡根據(jù)列字段對齊,然后合并。最后再重新整理一個新的index。
1.5 合并的同時增加區(qū)分數(shù)據(jù)組的鍵
前面提到的keys參數(shù)可以用來給合并后的表增加key來區(qū)分不同的表數(shù)據(jù)來源
1.5.1 可以直接用key參數(shù)實現(xiàn)
In [27]: result = pd.concat(frames, keys=['x', 'y', 'z'])
1.5.2 傳入字典來增加分組鍵
In [28]: pieces = {'x': df1, 'y': df2, 'z': df3} In [29]: result = pd.concat(pieces)
1.6 在dataframe中加入新的行
append方法可以將 series 和 字典就夠的數(shù)據(jù)作為dataframe的新一行插入。
In [34]: s2 = pd.Series(['X0', 'X1', 'X2', 'X3'], index=['A', 'B', 'C', 'D']) In [35]: result = df1.append(s2, ignore_index=True)
表格列字段不同的表合并
如果遇到兩張表的列字段本來就不一樣,但又想將兩個表合并,其中無效的值用nan來表示。那么可以使用ignore_index來實現(xiàn)。
In [36]: dicts = [{'A': 1, 'B': 2, 'C': 3, 'X': 4}, ....: {'A': 5, 'B': 6, 'C': 7, 'Y': 8}] ....: In [37]: result = df1.append(dicts, ignore_index=True)
以上就是本文的全部內(nèi)容,希望對大家的學習有所幫助,也希望大家多多支持腳本之家。
- 在Pandas中DataFrame數(shù)據(jù)合并,連接(concat,merge,join)的實例
- Python基礎之pandas數(shù)據(jù)合并
- pandas中DataFrame數(shù)據(jù)合并連接(merge、join、concat)
- 一文搞懂Python中Pandas數(shù)據(jù)合并
- Python必備技巧之Pandas數(shù)據(jù)合并函數(shù)
- pandas實現(xiàn)數(shù)據(jù)合并的示例代碼
- Python?Pandas數(shù)據(jù)合并pd.merge用法詳解
- Python?pandas數(shù)據(jù)合并merge函數(shù)用法詳解
- Python利用pandas進行數(shù)據(jù)合并詳解
- Pandas數(shù)據(jù)合并的兩種實現(xiàn)方法
- Pandas中數(shù)據(jù)合并的實現(xiàn)
相關文章
python環(huán)境中的概念conda中與環(huán)境相關指令操作
這篇文章主要介紹了python環(huán)境中的概念conda中與環(huán)境相關指令操作,虛擬環(huán)境是從電腦獨立開辟出來的環(huán)境,文章介紹了相關概念,需要的朋友可以參考下2023-03-03Python實現(xiàn)excel轉(zhuǎn)sqlite的方法
這篇文章主要介紹了Python實現(xiàn)excel轉(zhuǎn)sqlite的方法,結(jié)合實例形式分析了Python基于第三方庫xlrd讀取Excel文件及寫入sqlite的相關操作技巧,需要的朋友可以參考下2017-07-07解決Python報錯:SyntaxError:?invalid?character?‘,‘?(U+FF0C)
Python中的 SyntaxError錯誤是Python語言中常見的異常錯誤類型之一,表示語法錯誤,下面這篇文章主要給大家介紹了關于解決Python報錯:SyntaxError:?invalid?character?‘,‘?(U+FF0C)的相關資料,需要的朋友可以參考下2022-12-12