《转》Python学习(13)-Python的字符编码
Posted
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了《转》Python学习(13)-Python的字符编码相关的知识，希望对你有一定的参考价值。
转自 http://www.cnblogs.com/BeginMan/p/3166363.html
一、字符编码中ASCII、Unicode和UTF-8的区别
点击阅读：http://www.cnblogs.com/kingstarspe/p/ASCII.html
再推荐一篇相关博文：http://www.cnblogs.com/huxi/archive/2010/12/05/1897271.html
二、Unicode与ASCII
Python能处理Unicode和ASCII编码，为了让这两者看起来尽可能的相似，Python字符串从原来简单的类型改成了真正的对象。ASCII字符串成了StringType、Unicode字符串成了UnicodeType。使用如下：
>>> "hello world" #ASCII string
‘hello world‘
>>> u"hello world" #Unicode string
u‘hello world‘
>>>
1、str()、chr()只能以0~255作为参数，也即是说只处理ASCII字符串。如果有Unicode字符串，则会先自动转换成ASCII的然后在传入这些函数中。
原因：Unicode支持的字符多，如果在str()、chr()中有ASCII不存在的字符，则会发生异常。
2、unicode()、unichar()可以看做是Unicode版本的str()和chr()。
>>> unicode(‘hello world‘)
u‘hello world‘
三、编码与解码
它们解决的问题就是编码(encode())、解码(decode())问题，不至于出现乱码。
Codec表示编码方式。
""" 把一个Unicode字符串写入到磁盘文件，然后再把它读出并显示;
写入的时候用UTF-8，读也一样用UTF-8。"""
CODEC = ‘utf-8‘
FILE = ‘demo.txt‘
strIn = u‘BeginMan will be a great coder‘
byte_strIn = strIn.encode(CODEC) #以uft-8进行编码
f = open(FILE,‘w‘)
f.write(byte_strIn)
f.close()
f = open(FILE,‘r‘)
str = f.read()
f.close()
str_out = str.decode(CODEC) #以utf-8进行解码
print str_out #输出：BeginMan will be a great coder
注意：
1、程序中出现字符串时一定要在前面加上前缀u
s= ‘博客园Cnblog‘ #不要这样写,这样容易乱码如：鍗氬鍥瑿nblog
s = u‘博客园Cnblog‘#正确
2、不要使用str()函数，尽量用unicode()代替
3、不要使用过时的string 模块
4、没必要在程序中编码或解码unicode字符串，编码解码一般用于操作文件、数据库、网络等才使用。
5、字符串格式化
>>> ‘%s %s‘ %(‘Begin‘,‘man‘)
‘Begin man‘
#还记得上次的关于字符串的博客中说到的：“普通字符串与unicode字符串能转换成unicode字符串”
>>> u‘%s %s‘ %(u‘Begin‘,u‘Man‘)
u‘Begin Man‘
>>> u‘%s %s‘ %(‘Begin‘,‘Man‘)
u‘Begin Man‘
>>> ‘%s %s‘ %(u‘Begin‘,‘man‘)
u‘Begin man‘
>>> ‘%s %s‘ %(‘Begin‘,u‘man‘)
u‘Begin man‘
以上是关于《转》Python学习(13)-Python的字符编码的主要内容，如果未能解决你的问题，请参考以下文章