request基本使用及各种请求方式参数的示例
作者:Jeff的技术栈 时间:2021-03-31 02:32:52
各种请求方式
pip3 install requests
>>> import requests
>>> r = requests.get('https://www.cnblogs.com')
>>> r = requests.post('https://www.cnblogs.com', data = {'key':'value'})
>>> r = requests.put('https://www.cnblogs.com', data = {'key':'value'})
>>> r = requests.delete('https://www.cnblogs.com')
>>> r = requests.head('https://www.cnblogs.com')
>>> r = requests.options('https://www.cnblogs.com')
request各种参数
参数 | 说明 |
---|---|
params | 字典或字节序列,作为参数增加到url中 |
data | 字典,字节序列或文件对象,作为request的内容 |
json | JSON格式的数据,作为request的内容 |
headers | 字典,HTTP定制头 |
cookies | 字典或CookieJar, request中的cookie |
auth | 元组,支持HTTp认证功能 |
files | 字典类型,传输文件 |
timeout | 设定超时时间,秒为单位 |
proxies | 字典类型,设定访问代理服务器,可以增加登录认证 |
allow_redirects | 重定向开关,默认为True |
stream | 获取内容立即下载开关,默认为True |
verify | 认证SSL证书开关,默认为True |
cert | 本地SSL证书路径 |
request基本使用
import requests
response = requests.get('https://www.cnblogs.com/kermitjam/')
print(response.text)
print(respone.text) # 响应体转成str
print(respone.content) # 响应体二进制(图片,视频)
print(respone.status_code) # 响应状态码
print(respone.headers) # 响应头
print(respone.cookies) # 服务端返回的cookie
print(respone.cookies.get_dict()) # 转成字典
print(respone.cookies.items())
print(respone.url) # 当次请求的地址
print(respone.history) # 如果有重定向,放到一个列表中.查看上一次请求从哪里来。(图片防盗链)
print(respone.encoding) # 编码方式
print(respone.iter_content()) # 视频,图片迭代取值
content-length # 查看下载前文件大小
response.iter_content() # 视频,图片迭代取值
with open("a.mp4",'wb') as f:
for line in response.iter_content():
f.write(line)
get请求携带参数
# 方式一:会转码,不推荐
response = requests.get('https://www.baidu.com/s?wd=%E7%BE%8E%E5%A5%B3')
# 方式二:推荐
response = requests.get('https://www.baidu.com/',params={'name':'美女','age':18})
get请求携带headers头
respone = requests.get('http://127.0.0.1:8000/',params={'name':'美女','age':18},
headers={
# 标志,什么东西发出的请求,浏览器信息,django框架,从哪取?(meta)
'User-Agent': 'request',
# 上一个页面的地址,图片防盗链
'Referer': 'xxx'
})
print(respone.status_code)
get请求携带cookie
带cookie,随机字符串(用户信息:也代表session),不管后台用的token认证,还是session认证
一旦登陆了,带着cookie发送请求,表示登陆了(下单,12306买票,评论)
# 第一种方式
ret = requests.get('http://127.0.0.1:8000/',params={'name':'美女','age':18},
headers={
'cookie': 'key3=value;key2=value',
})
# 第二种方式
ret = requests.get('http://127.0.0.1:8000/',params={'name':'美女','age':18},
cookies={"islogin":"xxx"})
print(ret.status_code)
post请求携带数据(注册、登录)
# data:urlencoded编码
ret = requests.post('http://127.0.0.1:8000/', data={'name': "jeff", 'age': 18})
# data:json编码
import json
data = json.dumps({'name': "jeff", 'age': 18})
ret = requests.post('http://127.0.0.1:8000/', json=data)
print(ret)
# 注意:编码格式是请求头中带的,所以可以手动修改,在headers中改
session对象
# session对象
session=requests.session()
# 跟requests.get/post用起来完全一样,但是它处理了cookie
# 假设是一个登陆,并且成功
res = session.post('http://127.0.0.1:8000/')
# # 再向该网站发请求,就是登陆状态,不需要手动携带cookie
res = session.get("http://127.0.0.1:8000/")
print(res)
乱码问题
# 加载回来的页面,打印出来,乱码(我们用的是utf8编码),如果网站用gbk,
ret = requests.get('http://127.0.0.1:8000/')
ret.encoding='gbk' # 修改编码
print(ret.apparent_encoding) # 当前页面的编码
# ret.encoding = ret.apparent_encoding
print(ret.encoding)
print(ret.apparent_encoding)
解析json数据
# 返回数据,有可能是json格式,有可能是html格式
ret=requests.get('http://127.0.0.1:8000/')
# print(type(ret.text))
# print(ret.text)
a=ret.json()
print(a['name'])
print(type(a))
使用代理
代理简单解释:
代理其实就是一个中介,A和B本来可以直连,中间插入一个C,C就是中介。
#高匿:服务端,根本不知道我是谁
#普通:服务端是能够知道我的ip的
#http请求头中:X-Forwarded-For:代理的过程
爬虫使用正向代理好处:
1.突破频率限制。做个代理池,每次请求都是不同的Ip,服务器认为是不同的用户
2.不会封自己的ip。
正向代理即是客户端代理, 代理客户端, 服务端不知道实际发起请求的客户端.
反向代理即是服务端代理, 代理服务端, 客户端不知道实际提供服务的服务端
ret = requests.get('https://www.pearvideo.com/', proxies={'http': '47.115.54.89'})
print(type(ret.text))
print(ret.text)
上传文件
# 爬虫用的比较少,后台写服务
file = {'myfile': open("1.txt", 'rb')}
ret = requests.post('http://127.0.0.1:8000/', files=file)
print(ret.content)
来源:https://www.cnblogs.com/guyouyin123/p/12663228.html
标签:request,请求方式,参数
![](/images/zang.png)
![](/images/jiucuo.png)
猜你喜欢
python连接sql server乱码的解决方法
2023-06-27 07:25:17
np.dot()函数的用法详解
2023-06-14 02:12:21
SQL Server Bulk Insert 只需要部分字段时的方法
2011-10-24 19:44:49
用FSO操作 xml
2008-09-03 12:26:00
利用python Pandas实现批量拆分Excel与合并Excel
2023-07-02 19:08:23
如何利用SQL Server来发送电子发邮件?
2010-01-01 15:37:00
如何列出SQL数据库中的存储过程?
2010-01-12 19:58:00
详解php用static方法的原因
2023-11-20 19:20:45
监测站点使用多少session和application的asp程序
2007-09-12 19:40:00
详解Go语言中关于包导入必学的 8 个知识点
2023-07-09 05:38:11
![](https://img.aspxhome.com/file/2023/9/87619_0s.png)
Python Requests安装与简单运用
2023-09-26 22:02:15
Python 一行代码能实现丧心病狂的功能
2023-07-25 08:32:17
![](https://img.aspxhome.com/file/2023/8/61428_0s.png)
Python selenium如何设置等待时间
2023-08-31 18:53:39
让JavaScript拯救HTML5的离线存储[译]
2009-05-15 12:26:00
![](https://img.aspxhome.com/file/UploadPic/20095/15/01-33s.jpg)
Python面向对象之接口、抽象类与多态详解
2021-10-24 10:26:48
ASP中数据库调用中常见错误的现象和解决
2007-09-20 13:24:00
Python金融数据可视化汇总
2023-04-12 21:27:41
![](https://img.aspxhome.com/file/2023/3/75133_0s.png)
PHPStudy hosts文件可能不存在或被阻止打开及同步hosts失败问题
2023-06-08 10:29:10
![](https://img.aspxhome.com/file/2023/4/55494_0s.jpg)
python中csv文件创建、读取及修改等操作实例
2023-07-31 23:22:25
![](https://img.aspxhome.com/file/2023/2/78502_0s.png)
asp连接各种数据库代码
2008-03-11 11:16:00
![](https://img.aspxhome.com/file/UploadPic/20083/11/2008311115714589s.jpg)