pandas讀取excel,txt,csv,pkl文件等命令的操作
pandas讀取txt文件
讀取txt文件需要確定txt文件是否符合基本的格式,也就是是否存在\t,,,等特殊的分隔符
一般txt文件長成這個樣子
txt文件舉例
下面的文件為空格間隔
1 2019-03-22 00:06:24.4463094 中文測試 2 2019-03-22 00:06:32.4565680 需要編輯encoding 3 2019-03-22 00:06:32.6835965 ashshsh 4 2017-03-22 00:06:32.8041945 eggg
讀取命令采用 read_csv或者 read_table都可以
import pandas as pd df = pd.read_table("./test.txt") print(df) import pandas as pd df = pd.read_csv("./test.txt") print(df)
但是,注意,這個地方讀取出來的數(shù)據(jù)內(nèi)容為3行1列的DataFrame類型,并沒有按照我們的要求得到3行4列
import pandas as pd df = pd.read_csv("./test.txt") print(type(df)) print(df.shape) <class 'pandas.core.frame.DataFrame'> (3, 1)
read_csv函數(shù)
默認(rèn): 從文件、URL、文件新對象中加載帶有分隔符的數(shù)據(jù),默認(rèn)分隔符是逗號。
上述txt文檔并沒有逗號分隔,所以在讀取的時候需要增加sep分隔符參數(shù)
df = pd.read_csv("./test.txt",sep=' ')
read_pickle函數(shù)
read_pickle is only guaranteed to be backwards compatible to pandas 0.20.3.
Examples
>>> original_df = pd.DataFrame({"foo": range(5), "bar": range(5, 10)}) >>> original_df foo bar 0 0 5 1 1 6 2 2 7 3 3 8 4 4 9 >>> pd.to_pickle(original_df, "./dummy.pkl")
>>> unpickled_df = pd.read_pickle("./dummy.pkl") >>> unpickled_df foo bar 0 0 5 1 1 6 2 2 7 3 3 8 4 4 9
>>> import os >>> os.remove("./dummy.pkl")
補充:線上部署模型 讀取pkl文件跟excel
先把生成的excel文件(pkl文件)準(zhǔn)備好, 放到本地測試的路徑下
import platform import pandas as pd if platform.system() == 'Windows': home_dir = r'F:\python_項目\主后臺\r360_taobao\moxin' #本地地址 else: home_dir = r'/home/TG_MASTER_ADMIN_API/r360_taobao/moxin' #線上的路徑找到文件前一個文件夾 def testMx(): box = pd.read_excel(home_dir+'/規(guī)則新版設(shè)計1.xlsx', sheet_name='宜信標(biāo)準(zhǔn)評分卡') print("excel\t\t",box) box = pd.read_pickle(home_dir + '/foo.pkl') print("pkl\t\t",box) if __name__ == '__main__': testMx()
本地測試
給線上傳代碼
找到主文件路徑下面運行測試文件 python3 xxx.py
不好使的話去項目文件 框架下面 寫一個測試文件 把那個方法寫進(jìn)來 python3 XXX.py就OK了
以上為個人經(jīng)驗,希望能給大家一個參考,也希望大家多多支持腳本之家。如有錯誤或未考慮完全的地方,望不吝賜教。
相關(guān)文章
python tensorflow基于cnn實現(xiàn)手寫數(shù)字識別
這篇文章主要為大家詳細(xì)介紹了python tensorflow基于cnn實現(xiàn)手寫數(shù)字識別,文中示例代碼介紹的非常詳細(xì),具有一定的參考價值,感興趣的小伙伴們可以參考一下2018-01-01Python matplotlib超詳細(xì)教程實現(xiàn)圖形繪制
matplotlib 模塊不僅提供了繪制統(tǒng)計圖表的功能,還支持繪制圓形、正方形、矩形等各種圖形。這篇文章主要為大家詳細(xì)介紹了利用matplotlib.patches 繪制一些基本圖形,快來跟隨小編一起學(xué)習(xí)吧2021-12-12python+selenium+autoit實現(xiàn)文件上傳功能
這篇文章主要介紹了python+selenium+autoit實現(xiàn)文件上傳功能,需要的朋友可以參考下2017-08-08pycharm通過ssh遠(yuǎn)程連接服務(wù)器并運行代碼詳細(xì)圖文
在運行項目的過程中,由于自己電腦GPU不夠,通常需要將項目放到服務(wù)器上運行,這時就會遇到如何將pycharm和服務(wù)器進(jìn)行連接,下面這篇文章主要給大家介紹了關(guān)于pycharm通過ssh遠(yuǎn)程連接服務(wù)器并運行代碼的相關(guān)資料,需要的朋友可以參考下2024-03-03Python編程產(chǎn)生非均勻隨機數(shù)的幾種方法代碼分享
這篇文章主要介紹了Python編程產(chǎn)生非均勻隨機數(shù)的幾種方法代碼分享,具有一定借鑒價值,需要的朋友可以參考下。2017-12-12Python3進(jìn)制之間的轉(zhuǎn)換代碼實例
這篇文章主要介紹了Python3進(jìn)制之間的轉(zhuǎn)換代碼實例,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2019-08-08