多个csv文件或者excel读取方法

当遇到数据过大,分为多个文件存储时候,需要同时读取多个文件
用os.listdir()获取路径下所有文件

1.介绍
os.listdir() 方法用于返回指定的文件夹包含的文件或文件夹的名字的列表

2.实现方法:
#加载模块
import pandas as pd
import os
#获取路径下表格名字列表
listfile=os.listdir(“路径/”)
#初始化一个空列表
lists = []
#循环读取路径下的文件
for i in listfile:
lists.append(pd.read_excel(“路径/{}”.format(i)))
#将表格文件拼接
df = pd.concat(lists)
#保存到合并文件
df.to_csv(“路径/hebing.csv”,index=None)

3.如果保存的csv或者xlsx文件名称有规律,也可以这样实现:
数据文件:1.csv 2.csv 3.csv 4.csv 5.csv …
i=1
lists = [ ]
while i < 6:
lists.append(pd.read_excel(“路径/{}.csv”.format(i)))
df = pd.concat(lists)

猜你喜欢

转载自blog.csdn.net/sunjiaxing_1/article/details/105930675