Python批量处理文件将多个文件合并

╰+攻爆jí腚メ 2022-05-22 08:22 250阅读 0赞

#### 需求：把一个文件夹下的多个csv文件合并成一个文件，文件的格式是相同的，只是按照不同的月份分成了多个文件，现将文件夹下的文件进行合并 ####

import pandas as pd  
    import os  
    Folder_Path = 'C:\\Users\\dell\\雾霾预测\\data\\河北省'          #要拼接的文件夹及其完整路径，注意不要包含中文 
    SaveFile_Path =  'C:\\Users\\dell\\雾霾预测\\data'       #拼接后要保存的文件路径 
    SaveFile_Name = '河北省201701-201712.csv'              #合并后要保存的文件名 
    
    
    #修改当前工作目录 
    os.chdir(Folder_Path) 
    #将该文件夹下的所有文件名存入一个列表 
    file_list = os.listdir()  
    
    #读取第一个CSV文件并包含表头 
    df = pd.read_csv(Folder_Path +'\\'+ file_list[0])  #编码默认UTF-8，若乱码自行更改
    
    #将读取的第一个CSV文件写入合并后的文件保存 
    df.to_csv(SaveFile_Path+'\\'+ SaveFile_Name,encoding="utf_8_sig",index=False)  
    
    #循环遍历列表中各个CSV文件名，并追加到合并后的文件 
    FileStart = 1
    FileEnd = len(file_list)
    for i in range(FileStart,FileEnd):  
        df = pd.read_csv(Folder_Path + '\\'+ file_list[i])  
        df.to_csv(SaveFile_Path+'\\'+ SaveFile_Name,encoding="utf_8_sig",index=False, header=False, mode='a+')

###### 在读取的时候可能会出现中文乱码的问题，有可能是gbk编码这时候再读取文件的时候需要加上编码格式 ######

df = pd.read_csv(Folder_Path +'\\'+ file_list[0],encoding = 'gbk')

发表评论取消回复

表情：

评论列表（有 0 条评论，250人围观）

还没有评论，来说两句吧...

相关阅读

相关多个pdf文件合并

使用maven引入jar包： <dependency> <groupId>com.lowagie</groupId> <artifac

向右看齐/ 2024年04月01日 16:52/ 0 赞/ 119 阅读

相关 C# 将多个office文件转换及合并为一个PDF文件

PDF文件介绍 PDF（Portable Document Format ）文件源于20世纪90年代初期，如今早已成为了一种最流行的的文件格式之一。因为PDF文件有很多优点：

刺骨的言语ヽ痛彻心扉/ 2023年10月16日 22:31/ 0 赞/ 20 阅读

相关『Python笔记』Python实现多个json文件合并到一个json文件！

<table> <tbody> <tr> <td><font>Python实现多个json文件合并到一个json文件！</font> </td> </t

谁践踏了优雅/ 2022年12月29日 12:59/ 0 赞/ 363 阅读

相关 js 批量下载多个文件

function downloadFile(url){ //下载文件方法 const iframe = document.createElement("ifr

朴灿烈づ我的快乐病毒、/ 2022年12月17日 07:14/ 0 赞/ 239 阅读

相关 python合并excel文件关键字_python合并多个excel文件的示例

工作中经常遇到要将十几个Excel(不管是xls、或者是CSV)合并到同一个文件中去，手工一个一个复制是不可能的，此时就轮到Python出马了 ![7417c5593909c

谁借莪１个温暖的怀抱￠/ 2022年10月31日 13:56/ 0 赞/ 219 阅读

相关 Python实现多个文件夹多文件批量重命名文件

Rename.py -- coding:utf8 -- import os class BatchRename():

深藏阁楼爱情的钟/ 2022年10月19日 13:00/ 0 赞/ 225 阅读

相关 Python批量处理多文件夹多文件的文件移动

import os import shutil allpath = r'E:\animals10\validation' new_al

心已赠人/ 2022年10月19日 13:00/ 0 赞/ 3 阅读

相关 Python批量处理文件将多个文件合并

需求：把一个文件夹下的多个csv文件合并成一个文件，文件的格式是相同的，只是按照不同的月份分成了多个文件，现将文件夹下的文件进行合并 import pandas

╰+攻爆jí腚メ/ 2022年05月22日 08:22/ 0 赞/ 251 阅读

相关合并多个MP4文件

把多个MP4文件连接起来的方法与音频文件不太一样，比较有效的方法是: $ cat mylist.txt file '/path/to/file1' f

朴灿烈づ我的快乐病毒、/ 2021年10月26日 21:22/ 0 赞/ 392 阅读

相关 linux合并多个文件

linux在处理系统命令和文件方面表现的尤其突出，合并文件只需要两行命令 cd 要合并文件的目录下 find . -type f -exec cat \{\} \\;>al

Myth丶恋晨/ 2021年09月26日 06:14/ 0 赞/ 487 阅读