利用pandas批量提取文件数据

先上公式

import time
import math
import os
import sys


import os, os.path,shutil
import pandas as pd
import numpy as np 
#os.chidr()方法用于改变当前工作目录到指定的路径
os.chdir(r'C:\Users\zzhbq034\Desktop\123\河北赔付率计算\承保清单')
#获取当前的工作目录
file_chdir=os.getcwd()
#获取指定目录下所有的txt文件名称
#获取工作路径下txt文件的文件名
filetxt_list = []
#os.walk()方法用于通过在目录树中游走输出在目录中的文件名,向上或者向下,此方法是一个简单易用的文件,目录遍历器,可以帮助我们高校的处理文件,目录方面的事情
#root所指地是当前正在遍历的这个文件夹本身的地址
#dir是一个list,内容是该文件夹中所有的文件夹的名字
#files同样是list,内容是该文件夹中所有的文件
for root,dirs,files in os.walk(file_chdir):
    for file in files:
        if os.path.splitext(file)[1]== '.txt':
            filetxt_list.append(file)
filetxt_list
#导入文件
data = pd.DataFrame()
for txt in filetxt_list:
    data = data.append(pd.read_csv(txt,header=0,encoding='gb18030'))
data

本次内容所需要的知识点
1,获取当前工作路径方法为os.getcwd()
2,更改当前工作路径的方法为os.chdir(路径)
3, os.path.splitxt(路径)此函数可以把文件路径和文件类型分开。用来提取文件类型
例如
os.path.splitext(r’C:\Users\15969759rep.txt’)就会得到一个有两个元素的列表此列表为
(‘C:\Users\zzhbq034\Desktop\123\河北赔付率计算\承保清单\15969759rep’, ‘.txt’)
注意第二个元素是".“加文件类型不要把”."给忘了
4,os.walk(文件路径),此方法会返回三个数据root,dir,files
root为当前路径本身的地址
dir指这个路径下的所有文件夹的名字
files指这个路径下的所有文件的名字。
本次利用此函数就是提取文件夹内所有文件的名字

参考:https://blog.csdn.net/yyy430/article/details/82144021

发布了39 篇原创文章 · 获赞 11 · 访问量 1万+

猜你喜欢

转载自blog.csdn.net/weixin_42712867/article/details/92833678