Python3之乱码\\xe6\\x97\\xa0\\xe6\\xb3\\x95处理方式

作者:Quincy379 时间:2021-03-30 10:19:47 

查看字符编码:


import chardet
response = chardet.detect(b'\xe5\xbd\x93\xe5\x89\x8d\xe7\x9b\xae\xe5\xbd\x95\xe4\xb8\x8b\xe6\x89\x80\xe6\x9c\x89\xe6\x96\x87\xe4\xbb\xb6\xe5\x90\x8d\xe6\xb1\x87\xe6\x80\xbb\xe5\x88\x97\xe8\xa1\xa8')
print(response)

{'encoding': 'utf-8', 'confidence': 0.99, 'language': ''}

乱码字符转换:


response = b'\xe5\xbd\x93\xe5\x89\x8d\xe7\x9b\xae\xe5\xbd\x95\xe4\xb8\x8b\xe6\x89\x80\xe6\x9c\x89\xe6\x96\x87\xe4\xbb\xb6\xe5\x90\x8d\xe6\xb1\x87\xe6\x80\xbb\xe5\x88\x97\xe8\xa1\xa8'
print(response.decode('utf8'))

# def decode_char(*args):
#   response = args[0]
#   print(response.decode('utf8'))
#
# c = b'\a8\xe5\x90\xa7\xef\xbc\x81'
#
# decode_char(c)

补充知识:python3 中怎么把类似这样的'\xe5\xae\x9d\xe9\xb8\xa1\xe5\xb8\x82'转换成汉字输出

在编程的过程中遇到了类似的困扰,网上查了很多解决思路,终于算是明白了一些,这里和大家分享 一下。

python3相对于python2最重要的新特性之一就是对字符串(文本)和二进制数据流做了明确的区分,文本总是Unicode,由字符类型表示,而二进制数据则由bytes类型表示,python3不会以任意隐式方式混用字节型和字符型,也不能拼接字符串和字节流(python2中可以,会自动进行转换),也不能在字节流中搜索字符串,也不能将字符串传入参数为字节流的函数。

str和bytes类型之间的相互转换

字符串类str有一个encode()方法,它是字符串向比特流的编码过程。

bytes类则有一个decode()方法,它是比特流向字符串的解码过程

Python3之乱码\\xe6\\x97\\xa0\\xe6\\xb3\\x95处理方式

encode过程


s = '绝地求生'
ss = s.encode()
print(type(ss))
print(ss)

运行结果:

Python3之乱码\\xe6\\x97\\xa0\\xe6\\xb3\\x95处理方式

decode过程


s = b'\xe7\xbb\x9d\xe5\x9c\xb0\xe6\xb1\x82\xe7\x94\x9f'
ss = s.decode()
print(type(ss))
print(ss)

运行结果:

Python3之乱码\\xe6\\x97\\xa0\\xe6\\xb3\\x95处理方式

了解过基本的转化过程,下面回到主题,如何将'\xe7\xbb\x9d\xe5\x9c\xb0\xe6\xb1\x82\xe7\x94\x9f'转换成汉字输出呢?

要解决的问题是将bytes类型的内容以汉字的形式输出,但是该部分内容是字符串类型。因此首先需要将该str转换成bytes类型,再decode解码为str输出。这里需要用到的方法是encode(‘raw_unicode_escape')。当然,也可以使用decode(‘raw_unicode_escape')方法输出内容为bytes形式的字符串


s = '\xe7\xbb\x9d\xe5\x9c\xb0\xe6\xb1\x82\xe7\x94\x9f'
ss = s.encode('raw_unicode_escape')
print(type(ss))
print(ss)

sss = ss.decode()
print(sss)

结果:

Python3之乱码\\xe6\\x97\\xa0\\xe6\\xb3\\x95处理方式

方法补充:如果我们直接定义bytes类型的变量,也可以直接使用str(s, ‘utf8')的方式输出汉字


s = b'\xe7\xbb\x9d\xe5\x9c\xb0\xe6\xb1\x82\xe7\x94\x9f'

print(type(s))
print(s)

ss = str(s, 'utf8')
print(ss)

结果:

Python3之乱码\\xe6\\x97\\xa0\\xe6\\xb3\\x95处理方式

第二种方法可以输出从网络上直接抓取的网页中包含的中文字符。

我们使用如下代码,抓取网页www.baidu.com。


import urllib.request
response = urllib.request.urlopen('http://www.baidu.com')
html = response.read()
print(html)

显示的结果中,中文部分会以\xe7\x99\xbe\xe5\xba\xa6\xe4\xb8\x80代替,这里可以使用方法二进行转换。


import urllib.request
response = urllib.request.urlopen('http://www.baidu.com')
html =str(response.read(),'utf-8')
print(html)

结果如下:

Python3之乱码\\xe6\\x97\\xa0\\xe6\\xb3\\x95处理方式

来源:https://blog.csdn.net/qq_33733970/article/details/80374614

标签:Python3,乱码
0
投稿

猜你喜欢

  • Python中移除List重复项的五种方法

    2021-12-11 20:15:38
  • python3获取当前文件的上一级目录实例

    2021-06-03 02:22:22
  • oracle dba 应该熟悉的命令

    2009-07-02 12:08:00
  • Python实现简单的2048小游戏

    2023-04-18 07:19:25
  • asp下为什么韩文字后面显示分号?

    2011-03-10 11:07:00
  • python 判断txt每行内容中是否包含子串并重新写入保存的实例

    2023-11-28 06:34:56
  • python字符串替换的2种方法

    2022-12-27 20:59:24
  • Python机器学习应用之基于决策树算法的分类预测篇

    2021-10-28 20:53:14
  • python实现读取大文件并逐行写入另外一个文件

    2021-02-03 21:10:45
  • Python中operator模块的操作符使用示例总结

    2023-01-31 12:32:14
  • tkinter禁用(只读)下拉列表Combobox问题

    2021-01-02 13:05:34
  • Python matplotlib包和gif包生成gif动画实战对比

    2022-08-09 14:09:45
  • 详解Python各大聊天系统的屏蔽脏话功能原理

    2021-02-23 13:53:44
  • python中input()与raw_input()的区别分析

    2023-02-12 14:08:36
  • 星球大战与Python之间的那些事

    2023-05-25 13:49:35
  • Python多线程和队列操作实例

    2023-02-06 07:23:54
  • Python集合set的交集和并集操作方法

    2023-12-25 17:35:56
  • 页面编码的doctype声明

    2007-05-31 09:21:00
  • python 中关于pycharm选择运行环境的问题

    2021-09-01 21:56:10
  • python实现用户答题功能

    2022-01-05 21:38:02
  • asp之家 网络编程 m.aspxhome.com