python使用pandas按照行數(shù)分割表格
更新時間:2021年08月13日 10:00:14 作者:羊草
本文主要介紹了python使用pandas按照行數(shù)分割表格,文中通過示例代碼介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下
問題
- 一張excel表格,大概1萬行,需要錄入系統(tǒng)
- 系統(tǒng)每次最多只能錄入500行表格數(shù)據(jù),一旦超過500行,就會錄入失敗
- 需要把1萬行的數(shù)據(jù)按照500行分割,形成20個表格,這樣才能錄入系統(tǒng)
思路
- 使用pandas得到總行數(shù),比如10002行,分割表格的時候,要保留一行表頭
- 第一張表,是1-500行,第二張表是 501-1000,以此類推
- 最后一張表應(yīng)該是1000-10002行,生成的表格數(shù)量是10000/500+1,21張
- 生成的表格按照順序保存到一個目錄中
- 寫一個函數(shù),可以按照任意指定的分割數(shù)量進行分割。
代碼實現(xiàn)
#按行數(shù)分割表格函數(shù)
#問題
#1.如果有有一個十萬行表格,要錄入系統(tǒng),但是系統(tǒng)每次最多只能錄入500行?
#解決問題:
#1.按照指定的行數(shù)分割表格
#2.分割出來的表格按照序號命名
import pandas as pd
import os
def SplitExcel(file,num):
file_dir='result' #創(chuàng)建目錄
if os.path.isdir(file_dir):
os.rmdir(file_dir)
else:
os.mkdir(file_dir)
n = 1
row_list = []
df = pd.DataFrame(pd.read_excel(file, sheet_name=0))
row_num = int(df.shape[0]) # 獲取行數(shù)
if num >= row_num: #如果分割行數(shù)大于總行數(shù),報錯
raise Exception('too much!!')
try:
for i in list(range(num,row_num,num)):
row_list.append(i)
row_list.append(row_num) # 得到完整列表
except Exception as e:
print (e)
(name,ext)=os.path.splitext(file) #獲取文件名
for m in row_list:
filename=os.path.join(file_dir,name+'-' + str(n) + '.xlsx')
if m <row_num:
df_handle=df.iloc[m-num:m] #獲取n行之前
print (df_handle)
df_handle.to_excel(filename , sheet_name='sheet1',index=False)
elif m == int(row_num):
remainder=int(int(row_num)%num) #余數(shù)
df_handle=df.iloc[m-remainder:m] #獲取最后不能整除的行
df_handle.to_excel(filename , sheet_name='sheet1', index=False)
n = n + 1
if __name__=='__main__':
file= 'result.xls'
SplitExcel(file,num=10)
測試效果
一張83行的表格,去除表頭,一共82行,按照10行分割,一共要獲得9張表格,最后一張表格,應(yīng)該只有兩行,中間的表格,數(shù)據(jù)必須是連續(xù)的,
分割前


分割后



到此這篇關(guān)于python使用pandas按照行數(shù)分割表格的文章就介紹到這了,更多相關(guān)pandas按行分割表格內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Python調(diào)用VBA實現(xiàn)保留原始樣式的表格合并方法
本文主要介紹了Python調(diào)用VBA實現(xiàn)保留原始樣式的表格合并方法,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧2023-01-01
python實現(xiàn)猜數(shù)游戲(保存游戲記錄)
這篇文章主要為大家詳細介紹了python實現(xiàn)猜數(shù)游戲,保存游戲記錄,文中示例代碼介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下2020-06-06
基于Opencv制作的美顏相機帶你領(lǐng)略美顏特效的效果
最關(guān)于美顏類相機最重要的是第一步:人臉檢測,本篇文章中是采用openCV開源庫實現(xiàn),文中給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值2021-09-09
深度學習TextRNN的tensorflow1.14實現(xiàn)示例
這篇文章主要介紹了深度學習TextRNN的tensorflow1.14實現(xiàn)示例,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進步,早日升職加薪2023-01-01

