python使用pandas按照行數(shù)分割表格

更新時(shí)間：2021年08月13日 10:00:14 作者：羊草

本文主要介紹了python使用pandas按照行數(shù)分割表格，文中通過(guò)示例代碼介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下

問(wèn)題

一張excel表格，大概1萬(wàn)行，需要錄入系統(tǒng)
系統(tǒng)每次最多只能錄入500行表格數(shù)據(jù)，一旦超過(guò)500行，就會(huì)錄入失敗
需要把1萬(wàn)行的數(shù)據(jù)按照500行分割，形成20個(gè)表格，這樣才能錄入系統(tǒng)

思路

使用pandas得到總行數(shù)，比如10002行，分割表格的時(shí)候，要保留一行表頭
第一張表，是1-500行，第二張表是 501-1000，以此類推
最后一張表應(yīng)該是1000-10002行，生成的表格數(shù)量是10000/500+1,21張
生成的表格按照順序保存到一個(gè)目錄中
寫(xiě)一個(gè)函數(shù)，可以按照任意指定的分割數(shù)量進(jìn)行分割。

代碼實(shí)現(xiàn)

#按行數(shù)分割表格函數(shù)
#問(wèn)題
#1.如果有有一個(gè)十萬(wàn)行表格，要錄入系統(tǒng)，但是系統(tǒng)每次最多只能錄入500行？
#解決問(wèn)題：
#1.按照指定的行數(shù)分割表格
#2.分割出來(lái)的表格按照序號(hào)命名
import pandas as pd
import os
def SplitExcel(file,num):
    file_dir='result'   #創(chuàng)建目錄
    if os.path.isdir(file_dir):
        os.rmdir(file_dir)
    else:
        os.mkdir(file_dir)
    n = 1
    row_list = []
    df = pd.DataFrame(pd.read_excel(file, sheet_name=0))
    row_num = int(df.shape[0])  # 獲取行數(shù)
    if num >= row_num:  #如果分割行數(shù)大于總行數(shù)，報(bào)錯(cuò)
        raise Exception('too much!!')
    try:
        for i in list(range(num,row_num,num)):
            row_list.append(i)
        row_list.append(row_num)  # 得到完整列表
    except Exception as e:
        print (e)

    (name,ext)=os.path.splitext(file)  #獲取文件名

    for m in row_list:

        filename=os.path.join(file_dir,name+'-' + str(n) + '.xlsx')
        if m <row_num:
            df_handle=df.iloc[m-num:m] #獲取n行之前
            print (df_handle)
            df_handle.to_excel(filename , sheet_name='sheet1',index=False)
        elif m == int(row_num):
            remainder=int(int(row_num)%num) #余數(shù)
            df_handle=df.iloc[m-remainder:m] #獲取最后不能整除的行
            df_handle.to_excel(filename , sheet_name='sheet1', index=False)
        n = n + 1

if __name__=='__main__':
    file= 'result.xls'
    SplitExcel(file,num=10)