Python selenium get_cookies获取cookie不全的解决方案

 更新时间:2022年10月27日 10:48:40   作者:zhu6201976  
之前使用爬虫时最让我头疼的就是cookie失效的问题了,下面这篇文章主要给大家介绍了关于Python selenium get_cookies获取cookie不全的解决方案,需要的朋友可以参考下

一、场景

浏览器访问淘宝,再访问天猫,继续访问1688......

此时,浏览器中的cookie是什么状态?

显然,包含上述3个网站的所有cookie

二、此时,若通过selenium  get_cookies()方法,能获取到浏览器所有cookie吗?

答案显然是不能的(webdriver安全考虑),此方法只能获取当前请求域名下的所有cookie

故访问天猫或1688会登录失败。

那可以通过什么方式,将浏览器所有cookie获取?

方案一:基于浏览器内核,打造属于自己的浏览器,解除限制

方案二:挂代理,Fiddler,mitmproxy等

方案三:分别请求对应域名,获取所有cookie(推荐,笔者首创)

三、样例代码

lmdd_url = f'{self.root_lmdd_url}/seller/dashboard/plan/order'
 
self.chrome.get(lmdd_url)
cookie_list = self.chrome.get_cookies()
 
self.chrome.get(self.root_lmdd_api_url)
cookie_list_api = self.chrome.get_cookies()
 
cookie_list.extend(cookie_list_api)
self.update_session_cookie(cookie_list)

补充:selenium通过add_cookie()添加cookie

selenium通过add_cookie()添加cookie,再次访问网站时,服务器直接读取浏览器cookie

第一次登陆 手动输入用户名密码

# -*- coding:utf-8 -*-

from selenium import webdriver
from time import sleep

driver = webdriver.Firefox()
driver.get('http://www.baidu.com')
sleep(2)
driver.find_element_by_xpath('//*[@id="u1"]/a[7]').click()

driver.add_cookie({'name':'userName','value':'youname'})
driver.add_cookie({'name':'password','value':'youpassword'})

sleep(30)
driver.get('http://www.baidu.com')
driver.find_element_by_id('kw').send_keys('selenium')

总结

到此这篇关于Python selenium get_cookies获取cookie不全解决的文章就介绍到这了,更多相关Python selenium get_cookies获取cookie内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • python绘制直方图的方法

    python绘制直方图的方法

    这篇文章主要为大家详细介绍了python绘制直方图的方法,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2022-08-08
  • Python3 实现爬取网站下所有URL方式

    Python3 实现爬取网站下所有URL方式

    今天小编就为大家分享一篇Python3 实现爬取网站下所有URL方式,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2020-01-01
  • 深入理解Python @dataclass的内部原理

    深入理解Python @dataclass的内部原理

    文章介绍了Python中dataclass的实现原理,通过自定义装饰器实现了__init__和__repr__方法,并解释了__annotations__属性和exec函数在其中的作用,感兴趣的朋友跟随小编一起看看吧
    2025-01-01
  • pycharm第三方库安装失败的问题及解决经验分享

    pycharm第三方库安装失败的问题及解决经验分享

    这篇文章主要介绍了pycharm第三方库安装失败的解决方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2020-05-05
  • 使用Pygal库创建可缩放的矢量图表的操作方法

    使用Pygal库创建可缩放的矢量图表的操作方法

    在本文中,我们探讨了如何使用Pygal库创建可缩放的矢量图表,首先,我们介绍了Pygal的基本概念和安装方法,然后通过多个示例演示了如何创建各种类型的图表,包括折线图、柱状图、饼图、散点图、雷达图和地图等,需要的朋友可以参考下
    2024-05-05
  • python playwright 自动等待和断言详解

    python playwright 自动等待和断言详解

    这篇文章主要为大家介绍了python playwright 自动等待和断言,具有一定的参考价值,感兴趣的小伙伴们可以参考一下,希望能够给你带来帮助
    2021-11-11
  • Python解析json代码实例解析

    Python解析json代码实例解析

    这篇文章主要介绍了Python解析json代码实例解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2019-11-11
  • 如何用python整理附件

    如何用python整理附件

    本篇文章给大家整理了关于如何用python整理附件的相关知识点,学习python的朋友可以跟着测试下。
    2018-05-05
  • Flask文件下载的三种方法

    Flask文件下载的三种方法

    在本文中,我们将介绍三种不同的方法,以便你能够选择最适合你应用程序的方法,具有一定的参考价值,感兴趣的可以了解一下
    2023-11-11
  • python解析mdf或mf4文件利器之asammdf用法

    python解析mdf或mf4文件利器之asammdf用法

    这篇文章主要介绍了python解析mdf或mf4文件利器之asammdf用法,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
    2024-06-06

最新评论