python從PDF中提取數(shù)據(jù)的示例
01
前言
數(shù)據(jù)是數(shù)據(jù)科學(xué)中任何分析的關(guān)鍵,大多數(shù)分析中最常用的數(shù)據(jù)集類型是存儲在逗號分隔值(csv)表中的干凈數(shù)據(jù)。然而,由于可移植文檔格式(pdf)文件是最常用的文件格式之一,因此每個數(shù)據(jù)科學(xué)家都應(yīng)該了解如何從pdf文件中提取數(shù)據(jù),并將數(shù)據(jù)轉(zhuǎn)換為諸如“csv”之類的格式,以便用于分析或構(gòu)建模型。
在本文中,我們將重點討論如何從pdf文件中提取數(shù)據(jù)表。類似的分析可以用于從pdf文件中提取其他類型的數(shù)據(jù),如文本或圖像。我們將說明如何從pdf文件中提取數(shù)據(jù)表,然后將其轉(zhuǎn)換為適合于進一步分析和構(gòu)建模型的格式。我們將給出一個實例。
02
示例:使用Python從PDF文件中提取一個表格
a)將表復(fù)制到Excel并保存為table_1_raw.csv
數(shù)據(jù)以一維格式存儲,必須進行重塑、清理和轉(zhuǎn)換。
b)導(dǎo)入必要的庫
import pandas as pd import numpy as np
c)導(dǎo)入原始數(shù)據(jù),重新定義數(shù)據(jù)
df=pd.read_csv("table_1_raw.csv", header=None) df.values.shape df2=pd.DataFrame(df.values.reshape(25,10)) column_names=df2[0:1].values[0] df3=df2[1:] df3.columns = df2[0:1].values[0] df3.head()
d)使用字符串處理工具進行數(shù)據(jù)糾纏
我們從上面的表格中注意到,x5、x6和x7列是用百分比表示的,所以我們需要去掉percent(%)符號:
df4['x5']=list(map(lambda x: x[:-1], df4['x5'].values)) df4['x6']=list(map(lambda x: x[:-1], df4['x6'].values)) df4['x7']=list(map(lambda x: x[:-1], df4['x7'].values))
e)將數(shù)據(jù)轉(zhuǎn)換為數(shù)字形式
我們注意到列x5、x6和x7的列值數(shù)據(jù)類型為string,因此我們需要將它們轉(zhuǎn)換為數(shù)值數(shù)據(jù),如下所示:
df4['x5']=[float(x) for x in df4['x5'].values] df4['x6']=[float(x) for x in df4['x6'].values] df4['x7']=[float(x) for x in df4['x7'].values]
f)查看轉(zhuǎn)換數(shù)據(jù)的最終形式
df4.head(n=5)
g)導(dǎo)出最終數(shù)據(jù)到一個csv文件
df4.to_csv('table_1_final.csv',index=False)
以上就是python從PDF中提取數(shù)據(jù)的示例的詳細內(nèi)容,更多關(guān)于python 提取PDF數(shù)據(jù)的資料請關(guān)注腳本之家其它相關(guān)文章!
- Python數(shù)據(jù)分析之pandas讀取數(shù)據(jù)
- Python 循環(huán)讀取數(shù)據(jù)內(nèi)存不足的解決方案
- Python隨機函數(shù)random隨機獲取數(shù)字、字符串、列表等使用詳解
- python實現(xiàn)scrapy爬蟲每天定時抓取數(shù)據(jù)的示例代碼
- Python從文件中讀取數(shù)據(jù)的方法步驟
- python從Oracle讀取數(shù)據(jù)生成圖表
- python3:excel操作之讀取數(shù)據(jù)并返回字典 + 寫入的案例
- Python爬取數(shù)據(jù)并實現(xiàn)可視化代碼解析
- Python定時從Mysql提取數(shù)據(jù)存入Redis的實現(xiàn)
- 使用Python腳本從文件讀取數(shù)據(jù)代碼實例
- python3實現(xiàn)從kafka獲取數(shù)據(jù),并解析為json格式,寫入到mysql中
- Python實現(xiàn)一個自助取數(shù)查詢工具
相關(guān)文章
python中l(wèi)ist列表復(fù)制的幾種方法(賦值、切片、copy(),deepcopy())
本文主要介紹了python中l(wèi)ist列表復(fù)制的幾種方法(賦值、切片、copy(),deepcopy()),文中通過示例代碼介紹的非常詳細,對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-08-08python數(shù)據(jù)分析matplotlib的基礎(chǔ)繪圖使用
這篇文章主要為大家介紹了python數(shù)據(jù)分析matplotlib的基礎(chǔ)繪圖使用,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2022-05-05python交互模式基礎(chǔ)知識點學(xué)習(xí)
在本篇內(nèi)容里小編給大家整理的是關(guān)于python交互模式是什么的相關(guān)基礎(chǔ)知識點,需要的朋友們可以參考下。2020-06-06python3實現(xiàn)小球轉(zhuǎn)動抽獎小游戲
這篇文章主要為大家詳細介紹了python3實現(xiàn)小球轉(zhuǎn)動抽獎小游戲,文中示例代碼介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下2019-05-05python中68個內(nèi)置函數(shù)的總結(jié)與介紹
這篇文章主要介紹了python中68個內(nèi)置函數(shù)的總結(jié)與介紹,需要的朋友可以參考下2020-02-02