在NLP的相关任务中，应用python处理中文是很常见的。在这个过程中，由于编码方式的不一致，可能会出现以下两种错误： 1)SyntaxError: Non-ASCII character in file ‘文件名’ 2)UnicodeDecodeError: 'ascii' codec can't ...
分类：
编程语言 时间：
2018-12-23 19:28:55
阅读次数：
519
最近在用Python处理中文字符串时，报出了如下错误： 1、原因 因为默认情况下，Python采用的是ascii编码方式，如下所示： 而Python在进行编码方式之间的转换时，会将 unicode 作为“中间编码”，但 unicode 最大只有 128 那么长，所以这里当尝试将 ascii 编码字符 ...
分类：
编程语言 时间：
2018-09-05 10:33:26
阅读次数：
287
ref:http://www.cnblogs.com/zhoujie/archive/2013/06/07/problem1.html 1、python连接mssql数据库编码问题 python一直对中文支持的不好，最近老遇到编码问题，而且几乎没有通用的方案来解决这个问题，但是对常见的方法都试过之后 ...
分类：
数据库 时间：
2018-02-02 00:51:53
阅读次数：
1088
以下转自于：wklken的博客，写的非常好的一段有关编码的总结。Python-进阶-编码处理小结 整理下python编码相关的内容 注意: 以下讨论为Python2.x版本, Py3k的待尝试 开始 用python处理中文时，读取文件或消息，http参数等等 一运行，发现乱码(字符串处理，读写文件， ...
分类：
编程语言 时间：
2016-06-16 01:27:52
阅读次数：
250
来源：http://www.djangochina.cn/forum.php?mod=viewthread&tid=118977&extra=page%3D1字符串在Python内部的表示是unicode编码，因此，在做编码转换时，通常需要以unicode作为中间编码，即先将其他编码的字符串解码（d...
分类：
编程语言 时间：
2016-01-18 10:19:46
阅读次数：
142
一、引言 无论学习什么程序语言，字符串这种数据类型总是着有非常重要。然而最近在学习python这门语言，想要显示中文，总是出现各种乱码。于是在网上查了很多资料，各说纷纭，我也尝试了许多的方法，有时候可以正常显示，有时候确实乱码，让我摸不着头脑。于是自己利用python读写中文的文本文件来尝试去摸索....
分类：
编程语言 时间：
2015-10-18 22:48:08
阅读次数：
205
python xml处理中文时出现的错误，记录一下，以免忘记 "UnicodeDecodeError: 'ascii' codec can't decode byte 0xe9 in position 0: ordinal not in range(128)"解决办法，在该python文件的前面加上...
分类：
编程语言 时间：
2015-05-19 12:33:24
阅读次数：
136
python代码文件的编码py文件默认是ASCII编码，中文在显示时会做一个ASCII到系统默认编码的转换，这时就会出错：SyntaxError: Non-ASCII character。需要在代码文件的第一行或第二行添加编码指示：# coding=utf-8 ##以utf-8编码储存中文字符pri...
分类：
编程语言 时间：
2015-04-21 21:57:54
阅读次数：
393
"UnicodeDecodeError: 'ascii' codec can't decode byte 0xe9 in position 0: ordinal not in range(128)"解决办法，在该python文件的前面加上如下几句，问题得到解决#!/usr/bin/env pytho...
分类：
编程语言 时间：
2015-04-13 16:17:16
阅读次数：
274
今天Mayuyu要介绍一个非常有用的包，叫做mafan。Mafan是一组Python工具集合，用于方便处理中文。可以做繁简检测，繁简转化，检查中文标点，检查是否中英文混合，甚至还提供分词。具体可以参考如下链接
链接：http://www.open-open.com/lib/view/open1418367676855.html
而mafan的源代码在这里：https://...
分类：
编程语言 时间：
2015-01-01 19:48:51
阅读次数：
169
