Python响应对象text属性乱码解决方案
在获得网页响应对象res后，使用res.text属性可以获得网页源代码，但可能出现乱码！因为requests库会使用自动猜测的解码方式将抓取的网页源码进行解码，然后存储到res对象的text属性中；
但有的网站的编码格式和requests库默认的解码格式（）不一样（比如gbk gb2312是gbk的子集），这时候就要自己手动进行解码，先获得content属性，返回的是bytes类型的字符串，再进行解码decode（“网页的编码
格式”）
这时候可能出现新的问题
'gbk' codec can't decode byte 0xd0 in position 15264: illegal multibyte sequence
这是因为遇到了非法字符
比如网页中有这种字符
全角空格往往有多种不同的实现方式，比如\xa3\xa0，或者\xa4\x57，这些 字符，看起来都是全角空格，但它们并不是“合法”的全角空格（真正的全角空格是\xa1\xa1），因此在转码的过程中出现了异常。
只要字符串中出现了一个非法字符，整篇文章就都无法转码。
对于这种字符，根本不需要，不重要！
解决方法：在解码时候指定errors参数，
decode()的函数原型是decode([encoding], [errors='strict'])，可以用第二个参数控制错误处理的策略，默认的参数是strict，代表遇到非法字符时抛出异常；
- 如果设置为ignore，则会忽略非法字符；
- 如果设置为replace，则会用?取代非法字符；
- 如果设置为xmlcharrefreplace，则使用XML的字符引用
#requests库默认会使用自己猜测的解码方式将抓取下来的网页进行解码，然后存储到text属性上去；
#但在该网站中，编码方式和默认的解码方式不一样，就会产生乱码,所以要手动进行解码，先获得content再decode()解码
#右键查看网页源代码，发现是gb2312编码，gb2312就是gbk的子集，所以用decode("gbk")
以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。
- python中@property和property函数常见使用方法示例
- Python @property使用方法解析
- python3.6中@property装饰器的使用方法示例
- Python如何使用@property @x.setter及@x.deleter
- Python @property及getter setter原理详解
- python @property的用法及含义全面解析
- 实例讲解Python编程中@property装饰器的用法
- Python 私有属性和私有方法应用场景分析
- Python类及获取对象属性方法解析
- 什么是python类属性
- Python转换字典成为对象,可以用"."方式访问对象属性实例
- Python获取对象属性的几种方式小结
- 属性与 @property 方法让你的python更高效
相关文章
这篇文章主要为大家详细介绍了python实现象棋游戏，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2022-05-05
这篇文章主要介绍了Python数据序列化之pickle模块，pickle的本质是将Python数据还原为内存中的二进制数据，供用户转移、储存，更多详细内容，需要的小伙伴可以下面文章内容2022-03-03
这篇文章主要介绍了Python中dataclass库,合理使用dataclass将会大大减轻开发中的负担，将我们从大量的重复劳动中解放出来，这既是dataclass的魅力，本文结合实例代码给大家介绍的非常详细，需要的朋友参考下吧2022-09-09
这篇文章主要介绍了python中的pygame实现接球小游戏，文章基于python的相关资料展开详细的内容，具有一定的参考价值，需要的小伙伴可以参考一下2022-04-04
这篇文章主要介绍了Python项目的服务器部署，帮助大家更好的理解和学习使用python，感兴趣的朋友可以了解下2021-04-04
这篇文章主要为大家详细介绍了如何利用Python制作一个加强版烟花景，文中的示例代码讲解详细，对我们学习Python有一定帮助，需要的可以参考一下2022-02-02
Python使用pymysql模块操作mysql增删改查实例分析
这篇文章主要介绍了Python使用pymsql模块操作mysql增删改查,结合实例形式分析了Python使用pymsql模块针对mysql进行增删改查操作的相关实现方法与操作注意事项,需要的朋友可以参考下2019-12-12
这篇文章主要介绍了django最快程序开发流程详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2019-07-07
这篇文章主要介绍了OpenCV读取与写入图片的实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2020-10-10
这篇文章主要介绍了Python变量的定义和运算符的使用,Python和C/Java不同，在定义变量的时候不需要显示的指定变量的类型，在赋值的时候自动就会确定类型,需要的朋友可以参考下2023-05-05
最新评论