基于python爬取有道翻译过程图解
作者:何梦吉他 时间:2021-11-03 23:57:27
1.准备工作
先来到有道在线翻译的界面http://fanyi.youdao.com/
F12 审查元素 ->选Network一栏,然后F5刷新 (如果看不到Method一栏,右键Name栏,选中Method)
输入文字自动翻译后发现Method一栏有GET还有POST;GET是指从服务器请求和获得数据,POST是向指定服务器提交被处理的数据、
随便打开一个POST,找到preview可以看到我们输入的“我爱你一生一世”数据,可以证明post的提交数据的
下面分析一下Headers各个字段的意义;User-agent字段很重要
下面来看一下request模块中urlopen方法,查看文档;
发现urlopen有一个data参数,如果参数没赋值(默认None)就是GET形式,如果data参数被赋值了,就以POST形式提交
在这里,data参数其实是一个字典 ;就是源代码中From Data的数据
下面一篇文章是对urlencode与unquote的详细解释:(urllib库里可惜没有urldecode函数)
https://www.jb51.net/article/183857.htm
为什么要进行编码和解码呢?------》对于一些中文或者字符,url是不识别的,需要进行编码转换!encode('utf-8')把unicode的形式变成utf-8decode('utf-8')把utf-8形式变成Unicode编码形式2.下面进行敲!
来源:https://www.cnblogs.com/hemengjita/p/12341762.html
标签:python,爬取,有道,翻译
![](/images/zang.png)
![](/images/jiucuo.png)
猜你喜欢
python如何实现不可变字典inmutabledict
2023-11-20 11:09:46
对Python3之方法的覆盖与super函数详解
2023-08-25 19:05:28
![](https://img.aspxhome.com/file/2023/8/107268_0s.jpg)
asp之日期和时间函数示例
2008-04-13 06:50:00
javascript面向对象编程(四)
2008-03-07 14:20:00
python爬取淘宝商品详情页数据
2021-05-28 14:38:08
![](https://img.aspxhome.com/file/2023/0/75240_0s.png)
Python Web框架之Django框架文件上传功能详解
2023-06-25 11:19:40
![](https://img.aspxhome.com/file/2023/5/65045_0s.jpg)
浅谈django channels 路由误导
2021-12-11 00:27:09
![](https://img.aspxhome.com/file/2023/1/103471_0s.png)
python中随机函数random用法实例
2023-02-09 22:13:10
Pytorch模型转onnx模型实例
2022-09-06 03:39:24
使用keras时input_shape的维度表示问题说明
2023-05-10 02:52:25
![](https://img.aspxhome.com/file/2023/3/92193_0s.jpg)
python缺失值的解决方法总结
2023-07-28 23:47:38
php中mysql连接方式PDO使用详解
2023-11-06 02:46:43
PHP利用header跳转失效的解决方法
2023-09-07 23:39:45
轻松掌握python设计模式之访问者模式
2023-06-30 13:46:39
![](https://img.aspxhome.com/file/2023/1/97101_0s.jpg)
浅谈python 中的 type(), dtype(), astype()的区别
2022-09-13 22:40:39
Python Opencv中获取卷积核的实现代码
2021-04-07 07:11:50
![](https://img.aspxhome.com/file/2023/3/81533_0s.png)
Python开发虚拟环境使用virtualenvwrapper的搭建步骤教程图解
2022-02-08 00:33:29
![](https://img.aspxhome.com/file/2023/5/107945_0s.png)
Python实现学生管理系统的完整代码(面向对象)
2023-09-11 19:08:55
![](https://img.aspxhome.com/file/2023/4/100984_0s.png)
python中列表的切片与修改知识点总结
2023-08-29 00:49:08
![](https://img.aspxhome.com/file/2023/4/84094_0s.jpg)
解决Pytorch半精度浮点型网络训练的问题
2021-10-13 17:56:45