1 算法 1.1 字符串处理 re 正则表达式的标准库。 StringIO / cStringIO 以读写文件的方式来操作字符串（有点类似于内存文件）。 cStringIO 是 C 语言实现的，提供高性能；而 StringIO 是 Python 实现的，提供 Unicode 兼容性。 chardet ...
分类：
编程语言 时间：
2017-08-14 20:09:28
阅读次数：
1189
Chardet，字符编码探测器，可以自动检测文本、网页、xml的编码。 colorama，主要用来给文本添加各种颜色，并且非常简单易用。 Prettytable，主要用于在终端或浏览器端构建格式化的输出。 difflib，[Python]标准库，计算文本差异 Levenshtein，快速计算字符串相 ...
分类：
其他好文 时间：
2017-07-04 18:32:49
阅读次数：
265
http://www.cnblogs.com/ArsenalfanInECNU/p/4811643.html 1、python 读取文件时报错UnicodeDecodeError: 'gbk' codec can't decode byte 0x80 in position 205: illegal ...
分类：
其他好文 时间：
2017-05-28 12:24:34
阅读次数：
182
使用chardet模块来判断数据的编码；输入参数为str类型。 pd.DataFrame数据类型转换 当然方法还有很多。。。 ...
分类：
编程语言 时间：
2017-05-25 01:19:44
阅读次数：
207
转换很好转，就直接是 之前import chardet， 看一下原本是什么格式，原本的是utf-8-sig，就用这个decode。 问题是写入的时候出现了问题，一直会出现 类似这样的错误，去问了Song才知道utf-16就是unicode？？？然后是带BOM的，而且还要以'wb'写入，于是我回去直接 ...
分类：
编程语言 时间：
2017-03-15 13:32:06
阅读次数：
322
1. 安装chardet 在命令行中，进入Python27\Scripts目录,输入以下的命令：easy_install chardet 2. 操作 fencoding输出格式 {'confidence': 0.96630842899499614, 'encoding': 'GB2312'} ，只能 ...
分类：
编程语言 时间：
2017-01-13 15:49:02
阅读次数：
244
本文参考：http://blog.csdn.net/crazyhacking/article/details/39375535 谢谢整理！ chardet模块：http://blog.csdn.net/tianzhu123/article/details/8187470 字符集转换部分：http:/ ...
分类：
数据库 时间：
2016-12-06 02:54:44
阅读次数：
261
简单介绍:说明:此模块主要用来实现字符串/文件编码检测快速安装:pipinstall--upgradechardet常用方法:chardet.detect(aBuf)->dict说明:检测字符串编码,返回一个字典包含confidence编码匹配准确率,encoding最终检测的编码,当aBuf为空时可能encoding为None,所以最好判断一下最..
分类：
编程语言 时间：
2016-11-23 17:08:54
阅读次数：
242
import chardetdef CheckCode(filename): adchar=chardet.detect(filename) if adchar['encoding']=='utf-8': filename=filename.decode('utf-8') else: filenam ...
分类：
编程语言 时间：
2016-11-03 18:54:01
阅读次数：
189
需求 最近在做一个功能，使用python爬取网页然后保存到本地。其中遇到的一个难题是判断页面的编码方式。有问题就百度喽，当时我没想到自己去解决。一百度就找到了一个叫chardet的插件。大喜过望，试了一下很OK。好了，貌似问题解决了，可是 坑 为毛我的请求变慢了很多，起初我还以为是python慢，后 ...
分类：
其他好文 时间：
2016-10-28 20:36:59
阅读次数：
168
