使用python修复文件乱码

最近整理硬盘,硬盘里有很多类似

壋彈壆晘偱桙偝傟傑偣傫偐乣彮彈媧寣昉偺丄偍嵗晘梀傃乣

的乱码文件名

产生原因其实很简单，我这个文件本身是shift-jis（日文）编码的，在我的中文操作系统里被当做gbk解码就变成乱码了。
所以如果仅仅修复文名的话，只需要

str.encode('gbk').decode('shift-jis')

就可以实现了。
但是如果这行语句处理到原本不是乱码的，反而就变成乱码了。
为了自动化处理乱码文件，还需要识别出哪些是乱码。

根据我的测试，发现这些乱码文件，往往可以转成gbk但是不能转成gb2312。所以我就先尝试将文件名编码成gb2312和shift-jis如果报错，就判断是乱码，转码成gbk,再解码成shfit-jis。

我实现的代码如下：

import os.path
import osdef mess_det(input):try:    input.encode('gb2312')return 'zh'except:passtry:input.encode('shift-jis')return 'jp'except:passtry:name2=name.encode('gbk').decode('shift-jis')return 'mess'except:passfor root, dirs, files in os.walk(r"PATH", topdown=False):for name in files:mess=mess_det(name)if mess=='mess':new_name=name.encode('gbk').decode('shift-jis')os.rename(os.path.join(root,name),os.path.join(root,new_name))    for name in dirs:mess=mess_det(name)if mess=='mess':new_name=name.encode('gbk').decode('shift-jis')os.rename(os.path.join(root,name),os.path.join(root,new_name))

虽然不知道会不会有bug,但是我处理了不少文件了，还没出问题。

使用python修复文件乱码相关推荐

python安装文件乱码_python输出到文件乱码如何解决
python代码文件的编码 py文件默认是ASCII编码,中文在显示时会做一个ASCII到系统默认编码的转换,这时就会出错:SyntaxError: Non-ASCII character.需要在代码 ...
python读取文件乱码问题
今天突然想做一个实时读取日志文件的程序,然后用Python爬虫直接爬取文件,用只读的方式打开避免对系统写入日志造成影响. 上代码: #! /usr/bin/env python # codin ...
python写入文件乱码\u559c\u6b22\u4e00\u4e2a\u4eba
当python爬虫出来的数据在txt文件显示为\u559c\u6b22\u4e00\u4e2a\u4eba乱码时,解决方案为: def save_content_list(self, content_ ...
python读取文件——乱码问题总结
乱码问题总结今天在使用neo4j构建知识图谱时,读取建立好csv文件出现了报错,发现是乱码问题.在搜索了很多相关资料后,发现都不是很全面.于是做一个总结以供大家参考. 科普知识: python默认的 ...
python安装文件乱码_Python程序在Windows终端乱码解决方法
解决方法之一: 在程序中头声明 #!C:\Python27\python # -*- coding: utf-8 -*- ----- 在每一行输出的字符串,模仿下面: print u"你好& ...
python读取文件乱码
方法一:使用codecs import codecs f = codecs.open('nlpir/Readme.txt','r','GBK') line = f.readline() while l ...
Python 写入文件乱码的问题
如果写入excel.csv.txt存在中文,出现乱码很有可能就是编码没有设置正确读取和写入的编码最好一致,否则很容易出现问题对于pandas库的编码推荐 utf_8_sig read_csv(en ...
python输出到文件乱码_解决python解析文件时输出乱码
首先获取到json模块,encoding指定文件编码utf-8,errors报错时忽略错误,print()输出结果看看是否有问题. # -*- coding: utf-8 -*- import jso ...
python打开文件写文件乱码_Python读写文件乱码问题
对开发者来说,最恼人的问题之一莫过于读写文件的时候,由于编码千差万别,出现乱码问题.好难快速解决啊... 最近我也遇到了这样的问题,经研究,把大致的解决思路拿出来共享. 1. python中习惯首先声 ...

使用python修复文件乱码

使用python修复文件乱码

使用python修复文件乱码相关推荐

最新文章

热门文章