天天看点

python 中文编码问题

在用Python 做一应用时,需要将预处理时需要统一编码, 在将utf8转换为gb2312 时报错:

  错误原因:'gb2312' codec can't encode characteru'\xb7' in position 8061: illegal multibyte sequence

搜索后发现gb2312对一些很生僻的中文字并不支持,比如 “囧” “苶”

然后自己写了几行代码来验证是否真的不支持:

#coding:utf-8 s=u"囧" b=u"我" print b.encode("gb2312") print s.encode("gb2312")

输出:

我 Traceback (most recent call last): File "test.py", line 6, in print s.encode("gb2312") UnicodeEncodeError: 'gb2312' codec can't encode character u'\u56e7'in position 0: illegal multibyte sequence

可以看到“我”被正确解码,而“囧”字解码时却出现了UnicodeEncodeError,果然够囧的…

解决方法:

将gb2312替换为GBK或者GB18030就好了