對(duì)python中大文件的導(dǎo)入與導(dǎo)出方法詳解
1、csv文件的導(dǎo)入和導(dǎo)出
通過一個(gè)矩陣導(dǎo)出為csv文件，將csv文件導(dǎo)入為矩陣
將csv文件導(dǎo)入到一個(gè)矩陣中
import numpy
my_matrix = numpy.loadtxt(open("c:\\1.csv","rb"),delimiter=",",skiprows=0)
將矩陣導(dǎo)出到本地csv中
numpy.savetxt('new.csv', my_matrix, delimiter = ',')
未完待續(xù)。。。
也可以使用pickle模塊，保存的文件是序列化的
python的pickle模塊實(shí)現(xiàn)了基本的數(shù)據(jù)序列和反序列化。通過pickle模塊的序列化操作我們能夠?qū)⒊绦蛑羞\(yùn)行的對(duì)象信息保存到文件中去，永久存儲(chǔ)；通過pickle模塊的反序列化操作，我們能夠從文件中創(chuàng)建上一次程序保存的對(duì)象。
pickle.dump(obj, file, [,protocol])
注解：將對(duì)象obj保存到文件file中去。
protocol為序列化使用的協(xié)議版本，0：ASCII協(xié)議，所序列化的對(duì)象使用可打印的ASCII碼表示；1：老式的二進(jìn)制協(xié)議；2：2.3版本引入的新二進(jìn)制協(xié)議，較以前的更高效。其中協(xié)議0和1兼容老版本的python。protocol默認(rèn)值為0。
file：對(duì)象保存到的類文件對(duì)象。file必須有write()接口， file可以是一個(gè)以'w'方式打開的文件或者一個(gè)StringIO對(duì)象或者其他任何實(shí)現(xiàn)write()接口的對(duì)象。如果protocol>=1，文件對(duì)象需要是二進(jìn)制模式打開的。
pickle.load(file)
注解：從file中讀取一個(gè)字符串，并將它重構(gòu)為原來的python對(duì)象。
file：類文件對(duì)象，有read()和readline()接口。
保存數(shù)據(jù)
tmpdatapath = "E:\\data\\u_i_matrix.csv" savefp = open(tmpdatapath,"w") pickle.dump(u_i_mat,savefp) savefp.close();
導(dǎo)入數(shù)據(jù)
fp_mat = open("E:\\data\\tmpdata\\u_i_matrix.csv","r")
rMat = pickle.load(fp_mat)
fp_mat.close()
追加：將內(nèi)容通過print輸入到文件中
str=”a string to print to file” f=open(‘out.txt','w') print >>f,str f.close()
以上這篇對(duì)python中大文件的導(dǎo)入與導(dǎo)出方法詳解就是小編分享給大家的全部內(nèi)容了，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。
相關(guān)文章
利用Python將每日一句定時(shí)推送至微信的實(shí)現(xiàn)方法
這篇文章主要給大家介紹了關(guān)于利用Python將每日一句定時(shí)推送至微信的實(shí)現(xiàn)方法，文中通過示例代碼將實(shí)現(xiàn)的步驟一步步介紹的非常詳細(xì)，需要的朋友可以參考借鑒，下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2018-08-08
Python數(shù)據(jù)結(jié)構(gòu)與算法中的棧詳解(2)
這篇文章主要為大家詳細(xì)介紹了Python中的棧，文中示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下，希望能夠給你帶來幫助2022-03-03
Python+flask實(shí)現(xiàn)restful接口的示例詳解
這篇文章主要為大家詳細(xì)介紹了Python如何利用flask實(shí)現(xiàn)restful接口，文中的示例代碼講解詳細(xì)，具有一定的借鑒價(jià)值，需要的可以參考一下2023-02-02
使用SQLAlchemy操作數(shù)據(jù)庫表過程解析
這篇文章主要介紹了使用SQLAlchemy操作數(shù)據(jù)庫表過程解析,文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-06-06
python高級(jí)內(nèi)置函數(shù)用法實(shí)例
在本篇文章里小編給大家整理的是一篇關(guān)于python高級(jí)內(nèi)置函數(shù)用法實(shí)例內(nèi)容，有興趣的朋友們可以學(xué)參考下。2021-09-09
下面小編就為大家分享一篇Python-OpenCV基本操作方法詳解，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2018-04-04
selenium+Chrome滑動(dòng)驗(yàn)證碼破解二(某某網(wǎng)站)
這篇文章主要介紹了selenium+Chrome滑動(dòng)驗(yàn)證碼破解二(某某網(wǎng)站)，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-12-12
Python有兩種錯(cuò)誤很容易辨認(rèn):語法錯(cuò)誤和異常.本文就給大家詳細(xì)介紹一下Python錯(cuò)誤和異常,對(duì)正在學(xué)習(xí)python的小伙伴們很有幫助哦,需要的朋友可以參考下2021-05-05
python的virtualenv虛擬環(huán)境常見問題和命令
在Python中,venv是一個(gè)用于創(chuàng)建和管理虛擬環(huán)境的模塊,虛擬環(huán)境可以幫助你在項(xiàng)目之間隔離不同的Python包和依賴關(guān)系,這篇文章主要介紹了python的virtualenv虛擬環(huán)境常見問題和命令,需要的朋友可以參考下2024-07-07
使用 Python 獲取 Linux 系統(tǒng)信息的代碼
在本文中，我們將會(huì)探索使用Python編程語言工具來檢索Linux系統(tǒng)各種信息,需要的朋友可以參考下2014-07-07