news 2026/4/3 6:08:57

python中使用Selenium自动化框架

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
python中使用Selenium自动化框架

selenium是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中,就像真正的用户在操作一样。

通过编写模仿用户操作的 Selenium 脚本,可以从终端用户的角度驱动浏览器执行特定的动作,这个特性对我们爬取由 JavaScript 动态渲染的页面是非常友好的。

因为由 JavaScript 动态渲染的页面,这种页面上的 JavaScript 通常经过了编译打包,看到的都是简码,非常难以阅读。

一、Selenium基础

官方文档:https://selenium.dev/selenium/docs/api/py/api.html

Selenium自动化测试工具:可以驱动浏览器执行特定的动作(例如:点击、下拉等)。同时还可以获取浏览器当前呈现的页面的源代码

1.安装Selenium

pip install selenium

常用包导入:

  1. from selenium import webdriver

  2. from selenium.webdriver import ActionChains

  3. from selenium.webdriver.common.by import By

  4. from selenium.webdriver.common.keys import Keys

  5. from selenium.webdriver.support import expected_conditions as EC

  6. from selenium.webdriver.support.wait import WebDriverWait

  7. import time

2.安装谷歌浏览器及ChromeDriver

ChromeDriver镜像网站:http://npm.taobao.org/mirrors/chromedriver/[1]

ChromeDriver安装步骤:①下载chromedriver.exe(注意浏览器版本保持一致) ②将chromedriver.exe配置到系统环境变量Path(建议直接拷贝的python的安装目录Scripts目录下)

先写一点简单的小功能演示一下(浏览器自动打开百度搜索"曾庆林"):

  1. from selenium import webdriver

  2. from selenium.webdriver.common.keys import Keys

  3. browser = webdriver.Chrome()

  4. # 获取谷歌浏览器

  5. browser.get('https://www.baidu.com')

  6. # 打开百度

  7. input = browser.find_element_by_id('kw')

  8. # 找到id为kw的搜索框

  9. input.send_keys('曾庆林')

  10. # 设置搜索文本

  11. input.send_keys(Keys.ENTER)

  12. # 发送回车键

  13. print(browser.current_url)

  14. # 获取浏览器的当前地址

  15. print(browser.get_cookies())

  16. # 获取浏览器页面cookie

  17. print(browser.page_source)

  18. # 获取浏览器页面源文件

代码执行结果

3.创建浏览器对象

  1. from selenium import webdriver

  2. browser = webdriver.Chrome()

或者使用PhantomJS(基于Webkit的“无界面”(headless)浏览器)​​​​​​​

browser = webdriver.PhantomJS()

4.加载网页​​​​​​​

browser.get(url)

二、浏览器操作

1.加载网页​​​​​​​

browser.get(url)

2.执行js​​​​​​​

browser.execute_script(js代码串)

3.截图​​​​​​​

browser.save_screenshot("文件名.png")

4.前进与后退​​​​​​​

  1. # 页面后退

  2. browser.back()

  3. # 页面前进

  4. browser.forward()

5.标签页切换​​​​​​​

browser.switch_to.window(browser.window_handles[下标])

6.关闭​​​​​​​

  1. # 关闭当前标签页或窗口

  2. browser.close()

  3. # 关闭所有标签页或窗口

  4. browser.quit()

三、节点选取

1.单节点选取​​​​​​​

  1. browser.find_element_by_id('kw') # 原生语法

  2. browser.find_element_by_css_selector('#kw') # CSS语法

  3. browser.find_element_by_xpath("//*[@id='kw']") # XPath语法

以上三种方法获取的元素类型都是WebElement类型。以下两种方法等效:​​​​​​​

  1. browser.find_element_by_id('kw')

  2. browser.find_element(By.ID, 'kw')

2.多节点选取

与单节点选取相似,将element改为elements即可。​​​​​​​

  1. browser.find_elements_by_id()

  2. browser.find_elements_by_name()

  3. browser.find_elements_by_tag_name()

  4. browser.find_elements_by_class_name()

  5. browser.find_elements_by_xpath()

  6. browser.find_elements_by_css_selector()

  7. browser.find_elements_by_link_text()

  8. browser.find_elements_by_partial_link_text()

3.页面源代码获取​​​​​​​

browser.page_source

四、提取节点数据

语法数据
element.get_attribute(属性名)获取节点属性值
element.text获取节点文本内容
element.id获取节点ID
element.location获取节点位置
element.tag_name获取节点标签
element.size获取节点大小

五、动作

1.获取节点

•直接方法​​​​​​​

element = browser.find_element_by_XXX(value)

•使用By类型(需要导入By)​​​​​​​

  1. from selenium.webdriver.common.by import By

  2. element = browser.find_element(By.ID, value)

2.对节点元素的操作

动作描述
element.click()单击
element.submit()提交
element.send_keys(data)向可输入元素输入数据
element.clear()清空可输入元素中的数据

六、动作链

用来模拟鼠标拖拽、鼠标按键等操作。

1.创建动作链对象​​​​​​​

  1. from selenium.webdriver import ActionChains

  2. actions = ActionChains(browser)

2.动作

(1)鼠标操作
动作描述
actions.click(on_element)单击
actions.double_click(on_element)双击
actions.context_click(on_element)右键点击
actions.click_and_hold(on_element)点击不放
actions.drag_and_drop(source, target)拖放
actions.drag_and_drop_by_offset(source, target, xoffset, yoffset)拖动至元素相对位置
actions.move_by_offset(xoffset, yoffset)移动光标
actions.move_to_element(to_element)移动光标至元素
actions.move_to_element_with_offset(to_element, xoffset, yoffset)移动光标至元素相对位置
(2)键盘操作
动作描述
actions.send_keys(data)向当前焦点元素发送信息
actions.send_keys_to_element(element, data)向元素发送信息
actions.key_down(value, element)按下按键
actions.key_up(value, element)释放按键

3.执行动作链​​​​​​​

actions.perform()

七、延时等待

1.固定等待(强制等待)

等待固定的时间,不管页面的加载情况。​​​​​​​

time.sleep(秒数)

2.隐式等待

页面加载完成或者超时执行下一步。​​​​​​​

browser.implicitly_wait(time_to_wait)

3.显示等待

条件成立才执行下一步,超时则会抛出TimeoutException异常。​​​​​​​

  1. from selenium.webdriver.support import expected_conditions as EC

  2. wait = WebDriverWait(browser, timeout)

  3. element = wait.until(EC.条件)

4.等待条件

等待的条件含义
title_is标题是某内容
title_contains标题包含某内容
presence_of_element_located节点加载出来,需要传入定位元组(例如:(By.ID, 'q'))
visibility_of_element_located节点课件,传入定位元组
visibility_of传入的节点对象可见
presence_of_all_elements_located所有节点可见
text_to_be_present_in_element某个节点包含某文字
element_to_be_clickable节点可被点击
staleness_of判断一个节点是否仍在DOM中,可以判断页面是否被刷新过
alert_is_present判断警告框是否弹出

八、cookie操作

1.获取cookie​​​​​​​

browser.get_cookies()

2.添加cookie​​​​​​​

browser.add_cookie({"name": 名称, "value": 值})

3.删除cookie​​​​​​​

  1. browser.delete_cookie(name)

  2. browser.delete_all_cookies()

参考:https://www.jianshu.com/p/a36f92f74e75

感谢每一个认真阅读我文章的人,礼尚往来总是要有的,虽然不是什么很值钱的东西,如果你用得到的话可以直接拿走:

这些资料,对于【软件测试】的朋友来说应该是最全面最完整的备战仓库,这个仓库也陪伴上万个测试工程师们走过最艰难的路程,希望也能帮助到你!有需要的小伙伴可以点击下方小卡片领取

​​​​​​​

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/3/16 13:32:01

【专家级Dify调优秘籍】:实现access_token零感知容错的3大核心技术

第一章:Dify access_token 容错机制的核心价值在分布式系统与微服务架构中,API 调用的稳定性依赖于身份认证机制的健壮性。Dify 的 access_token 容错机制通过多重策略保障服务间通信的连续性与安全性,显著降低因令牌失效、网络抖动或时钟偏差…

作者头像 李华
网站建设 2026/3/31 1:28:42

“光·前沿”系列网络研讨会|显微镜解决方案研讨会

课程编号:CS260002 时间地点:授课时间:2026年1月29日(四)13:30-14:20课程时数:50分钟授课地点:黉论教育网校(www.honglun.vip)课程讲师:讯技光电工程师团队课…

作者头像 李华
网站建设 2026/3/27 9:42:11

E900V22C性能重生:从闲置盒子到全能影音中心的蜕变指南

E900V22C性能重生:从闲置盒子到全能影音中心的蜕变指南 【免费下载链接】e900v22c-CoreELEC Build CoreELEC for Skyworth e900v22c 项目地址: https://gitcode.com/gh_mirrors/e9/e900v22c-CoreELEC 你是否曾经想过,那些被淘汰的创维E900V22C电视…

作者头像 李华
网站建设 2026/3/28 20:08:05

B站视频下载全攻略:5步解锁BilibiliDown高效下载技巧

B站视频下载全攻略:5步解锁BilibiliDown高效下载技巧 【免费下载链接】BilibiliDown (GUI-多平台支持) B站 哔哩哔哩 视频下载器。支持稍后再看、收藏夹、UP主视频批量下载|Bilibili Video Downloader 😳 项目地址: https://gitcode.com/gh_mirrors/bi…

作者头像 李华
网站建设 2026/3/27 9:38:56

BilibiliDown终极指南:5分钟掌握B站视频批量下载

BilibiliDown终极指南:5分钟掌握B站视频批量下载 【免费下载链接】BilibiliDown (GUI-多平台支持) B站 哔哩哔哩 视频下载器。支持稍后再看、收藏夹、UP主视频批量下载|Bilibili Video Downloader 😳 项目地址: https://gitcode.com/gh_mirrors/bi/Bil…

作者头像 李华
网站建设 2026/3/27 5:02:47

Hourglass:Windows平台上最高效的免费计时器终极指南

Hourglass:Windows平台上最高效的免费计时器终极指南 【免费下载链接】hourglass The simple countdown timer for Windows. 项目地址: https://gitcode.com/gh_mirrors/ho/hourglass 在现代数字化工作环境中,精准的时间管理已成为提升个人和团队…

作者头像 李华