如何使用python批量修改文本文件编码格式

下面是如何使用python批量修改文本文件编码格式的完整攻略。

1. 确定文件编码格式

在批量修改文本文件编码格式之前，需要先确定文本文件的原始编码格式。可以使用多种方式进行检查，这里介绍两种常用方式。

1.1 使用字符集检测工具

Python中有多种字符集检测工具，比如chardet和cchardet。可以使用下面的代码段进行安装和使用。

# 安装 chardet 包
!pip install chardet

import chardet

# 检测文件编码格式
with open('test.txt', 'rb') as f:
    result = chardet.detect(f.read())
    print(result['encoding'])

1.2 使用文本编辑器查看

部分文本编辑器在菜单栏或文件属性中提供了编码格式信息。可以使用这种方式进行查看和确认。

2. 批量修改文件编码格式

使用Python批量修改文本文件编码格式的方式有多种。这里介绍两种较为常用的方式。

2.1 使用Python自带的codecs模块

codecs模块是Python自带的用于处理文本编码的模块。它提供了多种编码格式支持和转换的方法。

import os
import codecs

# 将当前目录下的所有txt文件，从UTF-8转为GBK
path = './'
for fn in os.listdir(path):
    if fn.endswith('.txt'):
        with codecs.open(fn, 'r', 'utf-8') as f:
            content = f.read()
        with codecs.open(fn, 'w', 'gbk') as f:
            f.write(content)

2.2 使用第三方包iconv

iconv是一款开源的文本格式转换工具，可以处理多种文本编码格式，支持多种操作系统。

import os

# 将当前目录下的所有txt文件，从UTF-8转为GBK
path = './'
for fn in os.listdir(path):
    if fn.endswith('.txt'):
        cmd = 'iconv -f utf-8 -t gbk -o {0} {1}'.format(fn, fn)
        os.system(cmd)

以上就是使用python批量修改文本文件编码格式的完整攻略，希望对你有所帮助。