• 欢迎访问搞代码网站,推荐使用最新版火狐浏览器和Chrome浏览器访问本网站!
  • 如果您觉得本站非常有看点,那么赶紧使用Ctrl+D 收藏搞代码吧

解决Python selenium get页面很慢时的问题

python 搞代码 4年前 (2022-01-08) 21次浏览 已收录 0个评论

今天小编就为大家分享一篇解决Python selenium get页面很慢时的问题,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧

driver.get(”url”)等到页面全部加载渲染完成后才会执行后续的脚本。

在执行脚本时,driver.get(“url”) ,如果当前的url页面内容较多加载特别慢,很费时间,但是我们需要操作的元素已经加载出来,可以将页面加载停掉,不影响后面的脚本执行,解决办法

设置页面加载timeout,get操作: try get except 脚本window.stop(), 使用GeckoDriver上有效果,

但是在ChromeDriver上还是会有问题,抛出异常timeout后续脚本不会继续执行

GeckoDriver执行具体如下:

访问百度贴吧某个获取其帖子总页数:

可以通过两种方式获取,简单的就是直接定位元素共11页

代码用定位尾页获取总页数

 from seleni<span style="color:transparent">来源gaodai#ma#com搞*代#码网</span>um import webdriver import re driver = webdriver.Firefox() #设定页面加载timeout时长,需要的元素能加载出来就行 driver.set_page_load_timeout(20) driver.set_script_timeout(20) #try去get try: driver.get("http://tieba.baidu.com/p/5659969529?red_tag=w0852861182") except: print("加载页面太慢,停止加载,继续下一步操作") driver.execute_script("window.stop()") last_page_element = driver.find_element_by_css_selector("li.l_pager.pager_theme_4.pb_list_pager >a:nth-child(12)") #定位到元素尾页元素 #获取尾页页码链接文本 text = last_page_element.get_attribute("href") all_page_num = re.search("\d+$",text).group() # 正则匹配到页码 print("当前贴吧贴子总页数为:%s"%all_page_num) 

以上就是解决Python selenium get页面很慢时的问题的详细内容,更多请关注gaodaima搞代码网其它相关文章!


搞代码网(gaodaima.com)提供的所有资源部分来自互联网,如果有侵犯您的版权或其他权益,请说明详细缘由并提供版权或权益证明然后发送到邮箱[email protected],我们会在看到邮件的第一时间内为您处理,或直接联系QQ:872152909。本网站采用BY-NC-SA协议进行授权
转载请注明原文链接:解决Python selenium get页面很慢时的问题

喜欢 (0)
[搞代码]
分享 (0)
发表我的评论
取消评论

表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址