Pandas讀存JSON數據操作示例詳解
引言
本文介紹的如何使用Pandas來讀取各種json格式的數據，以及對json數據的保存
讀取json數據
使用的是pd.read_json函數，見官網：pandas.pydata.org/docs/refere…
pandas.read_json( path_or_buf=None, # 文件路徑 orient=None, # 取值：split、records、index、columns、values typ='frame', # 要恢復的對象類型（系列或框架），默認'框架'. dtype=None, # boolean或dict，默認為True convert_axes=None, convert_dates=True, keep_default_dates=True, numpy=False, precise_float=False, date_unit=None, encoding=None, # 編碼 lines=False, # 布爾值，默認為False，每行讀取該文件作為json對象 chunksize=None, # 分塊讀取大小 compression='infer', nrows=None, storage_options=None)
模擬數據
模擬了一份數據，vscode打開內容：
可以看到默認情況下的讀取效果：
主要有下面幾個特點：
- 第一層級字典的鍵當做了DataFrame的字段
- 第二層級的鍵默認當做了行索引
下面重點解釋下參數orident
參數orident
取值可以是：split、records、index、columns、values
orident="split"
json文件的key的名字只能為index,cloumns,data；不多也不能少。
split' : dict like {index -> [index], columns -> [columns], data -> [values]}
In [3]:
data1 = '{"index":[1,2],"columns":["name","age"],"data":[["xiaoming",28], ["zhouhong",20]]}'
In [4]:
df1 = pd.read_json(data1, orient="split") df1
結果表明：
- index：當做行索引
- columns：列名
- data：具體的取值
如果我們改變其中一個key，比如data換成information就報錯了：
orient="records"
當orient="records"的時候，數據是以字段 + 取值的形式存放的。
‘records' : list like [{column -> value}, … , {column -> value}]
In [7]:
data2 = '[{"name":"Peter","sex":"male","age":20},{"name":"Tom","age":27},{"sex":"male"}]'
In [8]:
df2 = pd.read_json(data2, orient="records") df2
生成數據的特點：
- 列表中元素是以字典的形式存放
- 列表中每個元素（字典）的key，如果沒有出現則取值為NaN
orient="index"
當orient="index"的時候，數據是以行的形式來存儲。
dict like {index -> {column -> value}}
In [9]:
data3 = '{"id1":{"name":"Mike","age":20,"sex":"male","score":80},"id2":{"name":"Jack","sex":"female","score":90}}'
In [10]:
df3 = pd.read_json(data3, orient="index") df3
- 每個id存放一條數據
- 未出現的key取值為NaN
orient="columns"
在這種情況下數據是以列的形式來存儲的。
dict like {column -> {index -> value}}
In [11]:
data4 = '{"sex":{"id1":"Peter","id2":"Tom","id3":"Jimmy"},"age":{"id1": 20,"id3":28}}'
In [12]:
df4 = pd.read_json(data4, orient="columns") df4
如果我們對上面的結果實施轉置（兩種方法）：
我們會發(fā)現這個結果和orient="index"的讀取結果是相同的：
orient="values"
在這種情況下，數據是以數組的形式存在的：
‘values' : just the values array
In [16]:
data5 = '[["深圳",2000],["廣州",1900],["北京",2500]]'
In [17]:
df5 = pd.read_json(data5, orient="values") df5
對生成的列名進行重新命名：
to_json
將DataFrame數據保存成json格式的文件
DataFrame.to_json(path_or_buf=None, # 路徑
orient=None, # 轉換類型
date_format=None, # 日期轉換類型
double_precision=10, # 小數保留精度
force_ascii=True, # 是否顯示中文
date_unit='ms', # 日期顯示最小單位
default_handler=None,
lines=False,
compression='infer',
index=True, # 是否保留行索引
indent=None, # 空格數
storage_options=None)
官網學習地址：
pandas.pydata.org/docs/refere…
1、默認保存
df.to_json("df_to_json_1.json", force_ascii=True) # 不顯示中文
顯示結果為一行數據，且存在unicode編碼，中文無法顯示：
{"sex":{"Jimmy":"male","Tom":"female","Jack":"male","Mike":"female"},"age":{"Jimmy":20,"Tom":18,"Jack":29,"Mike":26},"height":{"Jimmy":187,"Tom":167,"Jack":178,"Mike":162},"address":{"Jimmy":"\u6df1\u5733","Tom":"\u4e0a\u6d77","Jack":"\u5317\u4eac","Mike":"\u5e7f\u5dde"}}
2、顯示中文
df.to_json("df_to_json_2.json", force_ascii=False) # 顯示中文
中文能夠正常顯示：
{"sex":{"Jimmy":"male","Tom":"female","Jack":"male","Mike":"female"},"age":{"Jimmy":20,"Tom":18,"Jack":29,"Mike":26},"height":{"Jimmy":187,"Tom":167,"Jack":178,"Mike":162},"address":{"Jimmy":"深圳","Tom":"上海","Jack":"北京","Mike":"廣州"}}
3、不同的orient顯示 + 換行（indent參數）
df.to_json("df_to_json_3.json", force_ascii=False, orient="index",indent=4)
# index + 換行
顯示結果中鍵為name信息：
4、改變index
df.to_json("df_to_json_4.json", force_ascii=False, orient="columns",indent=4) # columns + 換行
以上就是Pandas讀存JSON數據操作示例詳解的詳細內容，更多關于Pandas讀存JSON數據的資料請關注腳本之家其它相關文章！
相關文章
使用selenium+chromedriver+xpath爬取動態(tài)加載信息
這篇文章主要介紹了使用selenium+chromedriver+xpath爬取動態(tài)加載信息2022-02-02
這篇文章主要介紹了基于python的Tkinter實現一個簡易計算器的相關資料，還為大家分享了僅用用50行Python代碼實現的簡易計算器，感興趣的小伙伴們可以參考一下2015-12-12
Python?Flask框架實現Proteus仿真Arduino與網頁數據交互
這篇文章主要介紹了Python?Flask框架實現Proteus仿真Arduino與網頁數據交互，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習吧2022-11-11
這篇文章主要介紹了解決pytorch 數據類型報錯的問題，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2021-03-03
這篇文章主要介紹了Python二維數組不同初始化方式的差異說明,具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2023-08-08
計算機視覺在自動化系統(tǒng)觀測環(huán)境、預測該系統(tǒng)控制器輸入值等方面起著至關重要的作用,下面這篇文章主要給大家介紹了關于OpenCV實戰(zhàn)案例之車道線識別的相關資料,需要的朋友可以參考下2022-10-10
Python3調用百度AI識別圖片中的文字功能示例【測試可用】
這篇文章主要介紹了Python3調用百度AI識別圖片中的文字功能,結合實例形式分析了Python3安裝及使用百度AI接口的相關操作技巧,并附帶說明了百度官方AI平臺的注冊及接口調用操作方法,需要的朋友可以參考下2019-03-03
這篇文章主要介紹了python按行讀取文件并找出其中指定字符串的方法，本文通過實例代碼給大家介紹的非常詳細，具有一定的參考借鑒價值,需要的朋友可以參考下2019-08-08
標準差（或方差）,分為 總體標準差（方差）和 樣本標準差（方差）,下面這篇文章主要給大家介紹了關于pandas求方差和標準差的相關資料,文中通過示例代碼介紹的非常詳細,需要的朋友可以參考下2021-08-08
國慶假期快到了，想查查還有幾天幾小時到假期，這對程序員小菜一碟，輕輕松松用python寫個倒計時程序（天、時、分、秒），助你熬到假期2021-09-09