解决Python selenium get页面很慢时的问题
更新时间：2019年01月30日 10:40:23 作者：支持中文丶英文丶数字丨
今天小编就为大家分享一篇解决Python selenium get页面很慢时的问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
driver.get（"url")等到页面全部加载渲染完成后才会执行后续的脚本。
在执行脚本时，driver.get("url") ，如果当前的url页面内容较多加载特别慢，很费时间，但是我们需要操作的元素已经加载出来，可以将页面加载停掉，不影响后面的脚本执行，解决办法
设置页面加载timeout，get操作： try get except 脚本window.stop(), 使用GeckoDriver上有效果，
但是在ChromeDriver上还是会有问题，抛出异常timeout后续脚本不会继续执行
GeckoDriver执行具体如下：
访问百度贴吧某个获取其帖子总页数：
可以通过两种方式获取，简单的就是直接定位元素共11页
代码用定位尾页获取总页数
from selenium import webdriver
import re
driver = webdriver.Firefox()
#设定页面加载timeout时长，需要的元素能加载出来就行
driver.set_page_load_timeout(20)
driver.set_script_timeout(20)
#try去get
try:
driver.get("http://tieba.baidu.com/p/5659969529?red_tag=w0852861182")
except:
print("加载页面太慢，停止加载，继续下一步操作")
driver.execute_script("window.stop()")
last_page_element = driver.find_element_by_css_selector("li.l_pager.pager_theme_4.pb_list_pager >a:nth-child(12)") #定位到元素尾页元素
#获取尾页页码链接文本
text = last_page_element.get_attribute("href")
all_page_num = re.search("\d+$",text).group() # 正则匹配到页码
print("当前贴吧贴子总页数为:%s"%all_page_num)
以上这篇解决Python selenium get页面很慢时的问题就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
在Python中合并字典模块ChainMap的隐藏坑【推荐】
在Python中，当我们有两个字典需要合并的时候，可以使用字典的 update 方法,接下来通过本文给大家介绍在Python中合并字典模块ChainMap的隐藏坑，感兴趣的朋友一起看看吧2019-06-06
python plotly设置go.Scatter为实线实例
这篇文章主要为大家介绍了python plotly设置go.Scatter为实线线条的样式实例详解,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪2023-10-10
本篇文章带领大家彻底搞懂Python字符编码的一些知识，及python字符编码的一些基础概念，需要的朋友可以参考下2018-01-01
使用Python在Windows下获取USB PID&VID的方法
今天小编就为大家分享一篇使用Python在Windows下获取USB PID&VID的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-07-07
这篇文章主要为大家介绍了TensorFlow人工智能学习按索引取数据及维度变换的示例详解，有需要的朋友可以借鉴参考下，希望能够有所帮助2021-11-11
python flask基于cookie和session来实现会话控制的实战代码
所谓的会话（session）,就是客户端浏览器和服务端网站之间一次完整的交互过程,本文介绍falsk通过cookie和session来控制http会话的全部解析,通常我们可以用cookie和session来保持用户登录等,感兴趣的朋友一起看看吧2024-03-03
Django 接收Post请求数据,并保存到数据库的实现方法
今天小编就为大家分享一篇Django 接收Post请求数据,并保存到数据库的实现方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-07-07
这篇文章主要介绍了Python项目跨域问题解决方案,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-06-06
解决django.db.utils.IntegrityError:(1048, Column las
这篇文章主要介绍了解决django.db.utils.IntegrityError:(1048, Column last_login cannot be null)问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教2024-01-01
如何基于Python + requests实现发送HTTP请求
这篇文章主要介绍了如何基于Python + requests实现发送HTTP请求,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-01-01
最新评论