Python编码解码中的乱码问题怎么办
Admin 2022-08-26 群英技术资讯 556 次浏览
“字符在内存里的表示是unicode,如果要存盘或者发到网络就经过utf-8,然后对端收到依次解码。”
Python 3里面,str在内存里是unicode表示的
‘中文’ == ‘\u4e2d\u6587’
'中文'.encode('utf-8') b'\xe4\xb8\xad\xe6\x96\x87' '\u4e2d\u6587'.encode('utf-8') b'\xe4\xb8\xad\xe6\x96\x87'
1个汉字用unicode表示一般是2个byte,
例如:
‘中’=\u4e2d(十六进制写法【即2bytes】)
'A'.encode('ascii') >>>b'A' ('\u0041').encode('ascii') >>>b'A' 'A'.encode('utf-8') >>>b'A'
note: b’A’和’A’
在python 3中
b’A’是ascii编码的01010101的字节,占1个byte;
'A‘是在内存里按unicode形式编码的/ucc,占的是2个byte。
unicode编码后是bytes,如果这个字节范围不在ascii的表示范围内,就会显示成\x(十六进制形式)
例如:
"abc".encode('utf-8') b'abc' '中文'.encode('utf-8') b'\xe4\xb8\xad\xe6\x96\x87' 1个汉字,按utf-8编码,一般是3个bytes,\xe4是十六进制表示的1个byte。
相同的英文字符,ascii编码和utf-8编码的结果是一致的,因为这两种编码都使用一个byte表示一个英文字符
'abc'.encode('ascii').decode('utf-8') 'abc'
可以用一个编码然后再另一个解码,是可以成功还原的。但一般是不会这么做的。
ord函数获取字符的整数表示和chr数把编码转换为对应的字符
ord('A') 65 ord('中') 20013 chr(66) 'B' chr(25991) '文'
对str和对bytes用len,意义是不同的。
len(str)统计字符数,len(bytes)统计bytes数
>>> len('中文') 2 len(str)统计字符数 >>> bt1 = '中文'.encode('gb2312') >>> bt2 = '中文'.encode('utf-8') >>> bt1 b'\xd6\xd0\xce\xc4' >>> bt2 b'\xe4\xb8\xad\xe6\x96\x87' >>> len(bt1) 4 >>> len(bt2) 6
以Unicode表示的str通过encode()方法可以编码为指定的bytes
参数错误
\xe5\x8f\x82\xe6\x95\xb0\xe6\x9c\x89\xe8\xaf\xaf
今日已经完成过此任务,请明日再做此任务吧!
\u4eca\u65e5\u5df2\u7ecf\u5b8c\u6210\u8fc7\u6b64\u4efb\u52a1\uff0c\u8bf7\u660e\u65e5\u518d\u505a\u6b64\u4efb\u52a1\u5427!
>>> print(u'\xe5\x8f\x82\xe6\x95\xb0\xe6\x9c\x89\xe8\xaf\xaf '.encode('unicode_escape').decode('string_escape')) >>>print('\u4eca\u65e5\u5df2\u7ecf\u5b8c\u6210\u8fc7\u6b64\u4efb\u52a1\uff0c\u8bf7\u660e\u65e5\u518d\u505a\u6b64\u4efb\u52a1\u5427!'.decode('unicode_escape'))
>>>('\xe5\x8f\x82\xe6\x95\xb0\xe6\x9c\x89\xe8\xaf\xaf '.encode('raw_unicode_escape')).decode() >>>'\u4eca\u65e5\u5df2\u7ecf\u5b8c\u6210\u8fc7\u6b64\u4efb\u52a1\uff0c\u8bf7\u660e\u65e5\u518d\u505a\u6b64\u4efb\u52a1\u5427!'
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:mmqy2019@163.com进行举报,并提供相关证据,查实之后,将立刻删除涉嫌侵权内容。
猜你喜欢
这篇文章主要给大家介绍了关于如何利用Python开发一个简单的猜数字游戏的相关资料,文中通过示例代码介绍的非常详细,对大家学习或者使用Python具有一定的参考学习价值,需要的朋友们下面来一起学习学习吧
内容介绍Canvas控件基本属性Canvas控件绘图常用方法Canvas控件具有两个功能,首先它可以用来绘制各种图形,比如弧形、线条、椭圆形、多边形和矩形等,其次Canvas控件还可以用来展示图
在Python的备忘单是用于Python 3的编程语言中的单页参考表。 有不少朋友对此感兴趣,下面小编给大家整理和分享了相关知识和资料,易于大家学习和理解,有需要的朋友可以借鉴参考,下面我们一起来了解一下吧。
本文主要介绍了Python中的枚举函数enumerate()的具体用法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
我们在使用Python的过程中,会遇到这种情况:需要将接收的bytes数据转换为整形数,或者是将整形数转换成bytes数据。之前小编介绍过在Python中可以转换为整形数的int函数。本文小编就介绍Python中int与bytes如何相互转换的过程:int.to_bytes()和int.from_bytes()。
成为群英会员,开启智能安全云计算之旅
立即注册Copyright © QY Network Company Ltd. All Rights Reserved. 2003-2020 群英 版权所有
增值电信经营许可证 : B1.B2-20140078 粤ICP备09006778号 域名注册商资质 粤 D3.1-20240008