python爬虫使用requests发送post请求示例详解
作者:小熊&Gary 时间:2022-02-26 16:50:22
简介
HTTP协议规定post提交的数据必须放在消息主体中,但是协议并没有规定必须使用什么编码方式。服务端通过是根据请求头中的Content-Type字段来获知请求中的消息主体是用何种方式进行编码,再对消息主体进行解析。具体的编码方式包括:
application/x-www-form-urlencoded 最常见post提交数据的方式,以form表单形式提交数据。
application/json 以json串提交数据。
multipart/form-data 一般使用来上传文件。
一、 以form表单发送post请求
Reqeusts支持以form表单形式发送post请求,只需要将请求的参数构造成一个字典,然后传给requests.post()的data参数即可。
例:
# -*- coding: utf-8 -*-
# author:Gary
import requests
url = 'http://httpbin.org/post' # 一个测试网站的url
data = {'key1': 'value1', 'key2': 'value2'} # 你发送给这个的数据
r = requests.post(url, data=data) # 使用requests的post方法,data接受你想发送的数据
print(r.text) # 查看返回的内容
输出
{
“args”: {},
“data”: “”,
“files”: {},
#你提交的表单数据
“form”: {
“key1”: “value1”,
“key2”: “value2”
},
“headers”: {
……
“Content-Type”: “application/x-www-form-urlencoded”,
……
},
“json”: null,
……
}
可以看到,请求头中的Content-Type字段已设置为application/x-www-form-urlencoded,且data = {‘key1': ‘value1', ‘key2': ‘value2'}以form表单的形式提交到服务端,服务端返回的form字段即是提交的数据。
二、 以json形式发送post请求
可以将一json串传给requests.post()的data参数,
# -*- coding: utf-8 -*-
# author:Gary
import requests
import json
url = 'http://httpbin.org/post' # 一个测试网站的url
json_data = json.dumps({'key1': 'value1', 'key2': 'value2'}) # 你发送给这个的数据,数据格式转为json
r = requests.post(url, data=json_data) # 使用requests的post方法,data接受你想发送的数据
print(r.text) # 查看返回的内容
输出:
{
“args”: {},
“data”: “{\”key2\”: \”value2\”, \”key1\”: \”value1\”}”,
“files”: {},
“form”: {},
“headers”: {
……
“Content-Type”: “application/json”,
……
},
“json”: {
“key1”: “value1”,
“key2”: “value2”
},
……
}
可以看到,请求头的Content-Type设置为application/json,并将json_data这个json串提交到服务端中。
三、 以multipart形式发送post请求(上传文件)
Requests也支持以multipart形式发送post请求,只需将一文件传给requests.post()的files参数即可。
# -*- coding: utf-8 -*-
# author:Gary
import requests
url = 'http://httpbin.org/post'
files = {'file': open('report.txt', 'rb')} # 目录下得有report.txt文件才能上传,rb是指以二进制格式打开一个文件用于只读。
r = requests.post(url, files=files) # 通过files参数指定你想发送的文件的内容
print(r.text)
输出:
{
“args”: {},
“data”: “”,
“files”: {
“file”: “Hello world!”
},
“form”: {},
“headers”: {……
“Content-Type”: “multipart/form-data; boundary=467e443f4c3d403c8559e2ebd009bf4a”,
……
},
“json”: null,
……
}
文本文件report.txt的内容只有一行:Hello world!,从请求的响应结果可以看到数据已上传到服务端中。
来源:https://blog.csdn.net/weixin_44388092/article/details/107764580
![](/images/zang.png)
![](/images/jiucuo.png)
猜你喜欢
Flask框架运用WTForms实现用户注册的示例详解
![](https://img.aspxhome.com/file/2023/2/72862_0s.png)
Python进程的通信Queue、Pipe实例分析
![](https://img.aspxhome.com/file/2023/8/65078_0s.png)
详解Linux下安装php环境并且配置Nginx支持php-fpm模块
![](https://img.aspxhome.com/file/2023/5/64195_0s.png)
python使用dlib进行人脸检测和关键点的示例
![](https://img.aspxhome.com/file/2023/9/68469_0s.png)
浅谈python数据类型及类型转换
图标设计常犯的10种错误
![](https://img.aspxhome.com/file/UploadPic/20083/6/200836134649762s.jpg)
解决PHP 7编译安装错误:cannot stat ‘phar.phar’: No such file or directory
![](https://img.aspxhome.com/file/2023/2/55632_0s.jpg)
在Oracle PL/SQL中游标声明中表名动态变化的方法
FCKeditor编辑器基本配置优化修改使用方法
ORACLE客户端连接服务器的注意事项
带中英文翻译功能的收藏夹
基于python编写的微博应用
Python实用日期时间处理方法汇总
讲解SQL Server2005数据项的分拆与合并
纯CSS去除按钮以及链接点击时虚线
编写和优化SQL Server的存储过程
JS出现失效的情况总结
asp修改文件和文件夹的名字的代码
Python 如何强制限定小数点位数
Python安装第三方库攻略(pip和Anaconda)
![](https://img.aspxhome.com/file/2023/1/65021_0s.png)