基于python 字符编码的理解
更新时间：2017年09月02日 10:16:24 投稿：jingxian
下面小编就为大家带来一篇基于python 字符编码的理解。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧
一、字符编码简史：
美国：1963年 ASCII （包含127个字符 占1个字节）
中国：1980年 GB2312 （收录7445个汉字，包括6763个汉字和682个其它符号）
1993年 GB13000 （收录20902个汉字）
1995年 GBK1.0 （收录 21003个汉字）
2000年 GB18030 （收录70244个汉字）
世界：1991年 unicode（‘万国码'也就统一编码，通常占2字节，复杂的汉字占4字节）
UTF-8 （可变长的字符编码）
二、python中的编码解码应用
Python2中的字符串进行字符编码转换过程是：
字节串-->decode('原来的字符编码')-->Unicode字符串-->encode('新的字符编码')-->字节串
#!/usr/bin/env python
# -*- coding:utf-8 -*-
utf_8_a = '测试'
print(utf_8_a,type(utf_8_a),len(utf_8_a)) #打印utf_8_a的内容、类型及长度
unicode_a = utf_8_a.decode('utf-8') #对utf_8_a进行解码成unicode
print(unicode_a,type(unicode_a),len(unicode_a))
gbk_a = utf_8_a.decode('utf-8').encode('gbk') #先解码在编码成gbk
print(gbk_a,type(gbk_a),len(gbk_a)) #打印gbk_a的内存、类型及长度
print(gbk_a.decode('gbk'))
----------------------------------------------------
pytharm（python2.6）运行结果：
('\xe6\xb5\x8b\xe8\xaf\x95', <type 'str'>, 6)
(u'\u6d4b\u8bd5', <type 'unicode'>, 2)
('\xb2\xe2\xca\xd4', <type 'str'>, 4)
测试
Python3中定义的字符串默认就是unicode，因此不需要先解码，可以直接编码成新的字符编码：
字符串-->encode('新的字符编码')-->字节串
#!/usr/bin/env python
# -*- coding:utf-8 -*-
utf_8_a = '测试'
print(utf_8_a,type(utf_8_a),len(utf_8_a)) #打印utf_8_a的内容、类型及长度
gbk_a = utf_8_a.encode('gbk')
print(gbk_a.decode('gbk'),type(gbk_a),len(gbk_a))
--------------------------------------------------------
pycharm（python3.6）运行结果：
测试 <class 'str'> 2
测试 <class 'bytes'> 4
以上这篇基于python 字符编码的理解就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
Python中的random模块提供了丰富的工具和函数，帮助我们生成随机数、操作随机序列，以及模拟随机性事件，在本文中，我们将分享random模块，了解它的基本用法、功能和应用领域，并提供示例代码来帮助你更好地理解随机性的神奇世界2023-11-11
这篇文章主要为大家详细介绍了python编写一个GUI倒计时器，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2022-08-08
解决import tensorflow as tf 出错的原因
这篇文章主要介绍了解决import tensorflow as tf 出错的原因，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2020-04-04
本文主要的是pyinstaller在windows下的基本使用和基础避坑，文中通过示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2021-11-11
这篇文章主要介绍了python根据unicode判断语言类型实例代码，具有一定借鉴价值,需要的朋友可以参考下2018-01-01
协程（co-routine，又称微线程、纤程）是一种多方协同的工作方式。协程不是进程或线程，其执行过程类似于Python函数调用，Python的asyncio模块实现的异步IO编程框架中，协程是对使用async关键字定义的异步函数的调用2023-02-02
这篇文章主要为大家介绍了Python一行代码对话ChatGPT实现详解，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪2023-03-03
这篇文章主要介绍了Django 实现对已存在的model进行更改，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-03-03
本文主要介绍了numpy数组重塑。所谓数组重塑就是更改数组的形状，文中通过示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2021-09-09
Python+matplotlib+numpy实现在不同平面的二维条形图
这篇文章主要介绍了Python+matplotlib+numpy实现在不同平面的二维条形图，具有一定借鉴价值,需要的朋友可以参考下2018-01-01
最新评论