python中requests模拟登录的三种方式(携带cookie/session进行请求网站)

作者:蒋程扬 时间:2021-11-29 10:44:29 

一,cookie和session的区别

cookie在客户的浏览器上,session存在服务器上
cookie是不安全的,且有失效时间
session是在cookie的基础上,服务端设置session时会向浏览器发送设置一个设置cookie的请求,这个cookie包括session的id当访问服务端时带上这个session_id就可以获取到用户保存在服务端对应的session

二,爬虫处理cookie和session

带上cookie和session的好处:
能够请求到登录后的界面 

带上cookie和session的弊端:
一个cookie和session往往和一个用户对应,访问太快容易被服务器检测出来爬虫 

不需要cookie的时候尽量不要用

三,处理session,cookie请求

1,cookie请求方式

1.1 直接使用浏览器抓包到的现有的cookie进行访问网站:
 放在header字典里面


header={
"User-Agent":"Mozilla/5.0 (X11; Ubuntu; Linu…) Gecko/20100101 Firefox/64.0",
"Cookie":"csrftoken=JfnuMOvgMGZTxtCjvgfZ…6246vb2; username=chengyangkj",
}
r=request.get(url,headers=header)

当然也可以在发送get请求时加上cookies的字典参数:


Cookie="csrftoken=JfnuMOvgMGZTxtCjvgfZ…6246vb2; username=chengyangkj"

但是接受的参数是字典类型的,这就需要我们适用字符串分割方法把cookie字符串转为字典形式:


Cookie="csrftoken=JfnuMOvgMGZTxtCjvgfZ…6246vb2; username=chengyangkj"
cookies={i.split("=")[1]:i.split("=")[1] for i in Cookie.split("; ")}
#先使用for循环遍历Cookie以”; “(分号和空格)分开的列表 再分别获取i以等号分割的列表的[0] [1] 位置填入 字典键 和值的位置
r=request.get(url,headers=header,cookies=cookies)

适用于cookie过期时间比较长的网站

2.session请求方式
request提供了一个一个叫做session的类,来实现客户端和服务端的会话保持
 使用方法:
1.实例化一个session对象
2.让session发送get或post请求
3.再使用session访问只有登录之后才能访问的网站,这时候session会自动带上服务器保存在其中的信息进行访问


session=request.session() #实例化session对象
response=session.get(url,header) #使用session对象发送get请求 就能获取服务端设置的session对象

来源:https://blog.csdn.net/qq_38441692/article/details/84781033

标签:python,requests,模拟登录
0
投稿

猜你喜欢

  • golang一些常用的静态检查工具详解

    2024-04-25 13:16:17
  • python 爬取吉首大学网站成绩单

    2023-08-02 05:57:13
  • ASP使用MYSQL数据库全攻略

    2009-11-08 18:27:00
  • 2003年至今网页尺寸增长3倍

    2008-04-29 19:27:00
  • Mysql中limit的用法方法详解与注意事项

    2023-11-16 09:20:05
  • 深入了解vue2与vue3的生命周期对比

    2024-05-11 09:14:32
  • Oracle 用户权限管理方法

    2009-08-15 10:54:00
  • 总结分析Python的5个硬核函数

    2022-04-12 11:05:42
  • Python中的正则表达式与JSON数据交换格式

    2023-06-21 18:16:26
  • python中实现数组和列表读取一列的方法

    2021-04-07 08:04:48
  • MySQL分区之指定各分区路径详解

    2024-01-15 00:48:00
  • python numpy 显示图像阵列的实例

    2022-09-23 01:24:13
  • 基于Python预测一下世界杯最后赢家

    2021-01-30 16:16:48
  • python删除服务器文件代码示例

    2023-07-26 15:44:08
  • tensorflow如何继续训练之前保存的模型实例

    2023-05-22 22:54:57
  • [新手必看]15个asp编程常见问题解答

    2007-08-22 13:07:00
  • 使用PyCharm创建Django项目及基本配置详解

    2021-03-31 10:51:36
  • python3中的eval和exec的区别与联系

    2023-10-23 05:17:57
  • 使用Tensorflow将自己的数据分割成batch训练实例

    2023-06-14 08:18:07
  • 教你如何看懂SQL Server查询计划

    2024-01-12 21:10:41
  • asp之家 网络编程 m.aspxhome.com