Python使用pandas處理CSV文件的實例講解
Python中有許多方便的庫可以用來進行數(shù)據(jù)處理，尤其是Numpy和Pandas,再搭配matplot畫圖專用模塊，功能十分強大。
CSV（Comma-Separated Values）格式的文件是指以純文本形式存儲的表格數(shù)據(jù)，這意味著不能簡單的使用Excel表格工具進行處理，而且Excel表格處理的數(shù)據(jù)量十分有限，而使用Pandas來處理數(shù)據(jù)量巨大的CSV文件就容易的多了。
我用到的是自己用其他硬件工具抓取得數(shù)據(jù)，硬件環(huán)境是在Linux平臺上搭建的，當時數(shù)據(jù)是在運行腳本后直接輸出在terminal里的，數(shù)據(jù)量十分龐大，為了保存獲得的數(shù)據(jù)，在Linux下使用了數(shù)據(jù)流重定向，把數(shù)據(jù)全部保存到了文本文件中，形成了一個本地csv文件。
Pandas讀取本地CSV文件并設置Dataframe(數(shù)據(jù)格式)
import pandas as pd
import numpy as np
df=pd.read_csv('filename',header=None,sep=' ') #filename可以直接從盤符開始，標明每一級的文件夾直到csv文件，header=None表示頭部為空，sep=' '表示數(shù)據(jù)間使用空格作為分隔符，如果分隔符是逗號，只需換成 ‘，'即可。
print df.head()
print df.tail()
#作為示例，輸出CSV文件的前5行和最后5行，這是pandas默認的輸出5行，可以根據(jù)需要自己設定輸出幾行的值
數(shù)據(jù)讀取示例
圖片中顯示了我本地數(shù)據(jù)的前5行與最后5行，最前面一列沒有標號的是行號，數(shù)據(jù)一共有13列，標號從0到12，一行顯示不完全，在第9列以后換了行，并且用反斜杠“\”標注了出來。
2017年4月28日更新
使用pandas直接讀取本地的csv文件后，csv文件的列索引默認為從0開始的數(shù)字，重定義列索引的語句如下：
import pandas as pd
import numpy as np
df=pd.read_csv('filename',header=None,sep=' ',names=["week",'month','date','time','year','name1','freq1','name2','freq2','name3','data1','name4','data2'])
print df
此時打印出的文件信息如下，列索引已經(jīng)被重命名：
以上這篇Python使用pandas處理CSV文件的實例講解就是小編分享給大家的全部內(nèi)容了，希望能給大家一個參考，也希望大家多多支持腳本之家。
相關文章
numpy如何取出對角線元素、計算對角線元素和np.diagonal
這篇文章主要介紹了numpy如何取出對角線元素、計算對角線元素和np.diagonal問題，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2023-06-06
這篇文章主要介紹了Python標準庫之Sys模塊使用詳解,本文講解了使用sys模塊獲得腳本的參數(shù)、處理模塊、使用sys模塊操作模塊搜索路徑、使用sys模塊查找內(nèi)建模塊、使用sys模塊查找已導入的模塊等使用案例,需要的朋友可以參考下2015-05-05
詳解Python中字符串前“b”,“r”,“u”,“f”的作用
這篇文章主要介紹了Python中字符串前“b”,“r”,“u”,“f”的作用,感興趣的朋友跟隨小編一起看看吧2019-12-12
這篇文章主要介紹了Python sql注入 過濾字符串的非法字符實例，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2020-04-04
昨天看《Python核心編程》的時候，剛好看到了函數(shù)部分，于是順勢將目前接觸到的集中參數(shù)類型都總結一下吧^^2017-02-02
Python3 使用selenium插件爬取蘇寧商家聯(lián)系電話
這篇文章主要介紹了Python3 selenium爬取蘇寧商家聯(lián)系電話,此處使用了selenium插件 使用的是火狐瀏覽器 信息存儲到csv表格里面，需要的朋友可以參考下2019-12-12
使用Python調(diào)取任意數(shù)字資產(chǎn)錢包余額功能
那資產(chǎn)放在錢包的時候，如何來監(jiān)控余額呢？任何數(shù)字資產(chǎn)都可以使用區(qū)塊瀏覽器來查詢余額，那我們只要從此著手，用Python調(diào)取區(qū)塊瀏覽器，來查詢余額就能實現(xiàn)所有資產(chǎn)的余額監(jiān)控，感興趣的朋友跟隨小編一起看看吧2019-08-08
這篇文章主要介紹了python基于搜索引擎實現(xiàn)文章查重功能,本文給大家介紹的非常詳細，對大家的學習或工作具有一定的參考借鑒價值，需要的朋友可以參考下2021-05-05
這篇文章主要介紹了python計算對角線有理函數(shù)插值的方法,涉及Python數(shù)學運算的相關技巧,需要的朋友可以參考下2015-05-05
這篇文章主要介紹了django實現(xiàn)分頁的方法,實例分析了django分頁的技巧與Paginator對象的用法,需要的朋友可以參考下2015-05-05