python3里gbk编码的问题解决
更新时间：2022年08月19日 09:37:14 作者：哈哈的狮子
本文主要介绍了python3里gbk编码的问题解决，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
在python3有关字符串的处理当中，经常会遇到
'gbk' codec can't encode character '\xa0'这个问题，原因是在str里面存在着不能正确编码的字符。
通过以下方法即可解决。
import requests
from bs4 import BeautifulSoup
url = "http://jecvay.com/2015/03/learning-compilers-1.html"
url = url.encode('gbk','ignore').decode('utf-8') //忽略
response = requests.get(url)
print(response)
soup = BeautifulSoup(response.text)
print(soup.body.text)以上方法在必须要记录数据的时候会出现数据不准确问题
python3 字符串无法将 gbk 完全转换为utf8
对于必须存储的情况，将gbk -> 十六进制字节码文本 保存，需要的时候在转换为gbk以便显示。
def string_hex(data):
lin = ['%02X' % i for i in data]
return "".join(lin).upper()
def __ToUTF8(tuple):
lists = []
for itme in tuple:
tmp = itme
if type(itme) == bytes:
try:
tmp = itme.decode('gbk')
except UnicodeDecodeError:
tmp = string_hex(itme)
lists.append(tmp)
return listsdef readFileAll(file):
with open(file, 'rb') as f:
data = f.read()
return data
s = readFileAll('gkb.txt') //gbk 字符串文件
sx = string_hex(s)//转化为16进制文本
print(sx)到此这篇关于python3里gbk编码的问题解决的文章就介绍到这了,更多相关python3 gbk编码内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！
相关文章
这篇文章主要通过五个示例带大家深入了解下Python实现数据清洗的具体方法，文中的示例代码讲解详细，对我们学习Python有一定帮助，需要的可以参考一下2022-08-08
这篇文章主要介绍了pytorch LayerNorm参数的用法及计算过程，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教2021-05-05
本文主要介绍了Python数据容器dict(字典)的实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2023-02-02
这篇文章主要介绍了基于python实现监听Rabbitmq系统日志代码示例,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-11-11
本文主要介绍了Django与图表的数据交互的实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2022-08-08
这篇文章主要介绍了python基于event实现线程间通信控制,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-01-01
f-string想必很多Python用户都基础性的使用过，但是百分之九十的人不知道？在Python中f-string的几个技巧，今天就带大家一起看看Python f-string技巧大全，需要的朋友参考下吧2021-10-10
Python机器学习NLP自然语言处理Word2vec电影影评建模
本文是Python机器学习NLP自然语言处理系列文章，带大家开启一段学习自然语言处理 (NLP) 的旅程. 本篇文章主要学习NLP自然语言处理基本操作Word2vec电影影评建模2021-09-09
今天小编就为大家分享一篇python同时遍历数组的索引和值的实例，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-11-11
这篇文章主要为大家详细介绍了python实现图片上添加图片，文中示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下2019-11-11
最新评论