python讀取幾個(gè)G的csv文件方法
更新時(shí)間：2019年01月07日 10:44:25 作者：RobbenEmi
今天小編就為大家分享一篇python讀取幾個(gè)G的csv文件方法，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧
如下所示：
import pandas as pd
file = pd.read_csv('file.csv',iterator=True)
while True:
chunk = file.get_chunk(1000)
print(chunk.head(10))
print(chunk.tail(10))
以上這篇python讀取幾個(gè)G的csv文件方法就是小編分享給大家的全部?jī)?nèi)容了，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。
相關(guān)文章
這篇文章主要介紹了Python解析json代碼實(shí)例解析,文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2019-11-11
這篇文章主要介紹了Python數(shù)據(jù)類(lèi)型字典dictionary，字典是另一種可變?nèi)萜髂Ｐ?，且可存?chǔ)任意類(lèi)型對(duì)象。本篇文字將詳細(xì)講述字典的常用方法，需要的可以參考一下2022-03-03
Python爬蟲(chóng)過(guò)程解析之多線程獲取小米應(yīng)用商店數(shù)據(jù)
這篇文章主要介紹了Python爬蟲(chóng)過(guò)程解析之多線程獲取小米應(yīng)用商店數(shù)據(jù),本文給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2020-11-11
python3使用pandas獲取股票數(shù)據(jù)的方法
今天小編就為大家分享一篇python3使用pandas獲取股票數(shù)據(jù)的方法，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2018-12-12
這篇文章主要介紹了Python類(lèi)的繼承和多態(tài)代碼詳解，具有一定借鑒價(jià)值,需要的朋友可以參考下2017-12-12
python連接sql?server數(shù)據(jù)庫(kù)的方法實(shí)戰(zhàn)
當(dāng)我們用Python來(lái)編寫(xiě)網(wǎng)站,必須要能夠通過(guò)python操作數(shù)據(jù)庫(kù),下面這篇文章主要給大家介紹了關(guān)于python連接sql?server數(shù)據(jù)庫(kù)的相關(guān)資料,文中通過(guò)圖文介紹的非常詳細(xì),需要的朋友可以參考下2022-08-08
Python對(duì)接PicGo實(shí)現(xiàn)圖片自動(dòng)加水印并上傳操作示例
這篇文章主要為大家介紹了Python對(duì)接PicGo實(shí)現(xiàn)圖片自動(dòng)加水印并上傳的操作示例，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步2021-10-10
在現(xiàn)代網(wǎng)絡(luò)應(yīng)用和開(kāi)發(fā)中,使用Cookies是一種常見(jiàn)的方式,它們用于存儲(chǔ)用戶信息、會(huì)話狀態(tài)等,本文為大家整理了多種Python獲取瀏覽器Cookies的方法,希望對(duì)大家有所幫助2023-12-12
python實(shí)現(xiàn)購(gòu)物車(chē)小程序
這篇文章主要為大家詳細(xì)介紹了python實(shí)現(xiàn)購(gòu)物車(chē)小程序，文中示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2022-02-02
python sklearn中tsne算法降維結(jié)果不一致問(wèn)題的解決方法
最近在做一個(gè)文本聚類(lèi)的分析,在對(duì)文本數(shù)據(jù)embedding后,想著看下數(shù)據(jù)的分布,于是用sklearn的TSNE算法來(lái)降維embedding后的數(shù)據(jù)結(jié)果,當(dāng)在多次執(zhí)行后,竟發(fā)現(xiàn)TSNE的結(jié)果竟然變了,而且每次都不一樣,所以本文就給大家講講如何解決sklearn中tsne算法降維結(jié)果不一致的問(wèn)題2023-10-10