使用 Selenium 和 Python 访问 Shadow DOM 中的元素

使用 Selenium 和 Python 访问 Shadow DOM 中的元素

本文旨在提供一个全面的教程,指导读者如何使用 selenium 和 python 自动化测试访问和操作 shadow dom 中的元素。由于标准 selenium 方法无法直接穿透 shadow dom,我们将重点介绍如何利用 javascript 执行器获取 shadow root,并在此基础上定位其内部的元素。文章将包含详细的步骤、代码示例以及获取必要信息(如 javascript 路径和 css 选择器)的实用技巧,帮助开发者有效解决 shadow dom 元素的定位难题。

理解 Shadow DOM 及其对自动化测试的挑战

Shadow DOM(影子 DOM)是 Web Components 标准的一部分,它允许开发人员创建封装的、独立的 DOM 子树,这些子树与主文档 DOM 隔离。这种封装性带来了许多好处,例如样式和行为的隔离,防止外部 CSS 规则意外影响组件内部,反之亦然。然而,这种隔离性也给传统的自动化测试工具(如 Selenium)带来了挑战。

当使用 Selenium 的 find_element 方法时,它通常只能在主文档 DOM 中查找元素。对于位于 Shadow DOM 内部的元素,这些方法会失败并抛出 NoSuchElementException,因为它们无法“看到”这些被封装的元素。为了克服这一限制,我们需要借助 JavaScript 执行器来间接访问 Shadow DOM。

访问 Shadow DOM 元素的策略

核心策略是分两步走:首先,通过执行 JavaScript 获取 Shadow DOM 的根节点(Shadow Root);然后,利用这个 Shadow Root 对象作为上下文,在其内部查找目标元素。

步骤一:获取 Shadow Root

要获取 Shadow Root,我们需要知道其宿主元素(Host Element)。宿主元素是主 DOM 中的一个普通元素,Shadow DOM 就依附于它。一旦找到宿主元素,就可以通过其 shadowRoot 属性来访问 Shadow Root。

立即学习“Python免费学习笔记(深入)”;

在 Selenium 中,我们可以使用 driver.execute_script() 方法来执行 JavaScript 代码。获取 Shadow Root 的典型 JavaScript 模式如下:

return document.querySelector('your_host_element_css_selector').shadowRoot;

这里的 ‘your_host_element_css_selector’ 是用于定位 Shadow DOM 宿主元素的 CSS 选择器。

实用技巧:如何获取 Shadow Root 的 JavaScript 路径(Chrome 浏览器

问小白 问小白

免费使用DeepSeek满血版

问小白 5331 查看详情 问小白 打开 Chrome 开发者工具(F12)。在“Elements”面板中,找到 Shadow DOM 的宿主元素。通常,它会有一个 #shadow-root 的标记。右键点击该宿主元素,选择“Copy” -> “Copy JS path”。复制的 JS path 可能会很长,例如 document.querySelector(“#app > my-component”).shadowRoot。我们需要对其进行一些修改:确保它以 return 开头。将双引号替换为单引号(如果需要,以避免 Python 字符串冲突)。确保路径指向的是 shadowRoot 属性。

示例代码:获取 Shadow Root

from selenium import webdriverfrom selenium.webdriver.common.by import Byfrom selenium.webdriver.support.ui import WebDriverWaitfrom selenium.webdriver.support import expected_conditions as EC# 初始化 WebDriverdriver = webdriver.Chrome()driver.get('https://your-target-url.com') # 替换为实际的 URLtry:    # 等待 Shadow DOM 的宿主元素出现    # 假设宿主元素的 CSS 选择器是 '#host-element'    host_element_selector = '#host-element'    WebDriverWait(driver, 10).until(        EC.presence_of_element_located((By.CSS_SELECTOR, host_element_selector))    )    # 通过 JavaScript 获取 Shadow Root    # 这里的 'return document.querySelector("#host-element").shadowRoot' 是一个示例    # 请根据实际页面结构调整 '#host-element'    shadow_root_script = f"return document.querySelector('{host_element_selector}').shadowRoot"    shadow_root = driver.execute_script(shadow_root_script)    if shadow_root:        print("成功获取 Shadow Root。")        # shadow_root 现在是一个 Selenium WebElement 对象,可以像常规元素一样使用    else:        print("未能获取 Shadow Root,宿主元素可能不存在或没有 Shadow DOM。")except Exception as e:    print(f"发生错误: {e}")finally:    # driver.quit() # 暂时不关闭,以便在下一步使用    pass

步骤二:在 Shadow Root 中定位目标元素

一旦获得了 shadow_root 对象,就可以像操作普通的 Selenium WebElement 一样,在其内部使用 find_element 或 find_elements 方法来定位 Shadow DOM 内部的元素。需要注意的是,在 Shadow Root 中,通常推荐使用 CSS 选择器进行定位。

实用技巧:如何获取元素的 CSS 选择器(Chrome 浏览器)

打开 Chrome 开发者工具(F12)。在“Elements”面板中,展开 Shadow DOM 结构,找到你想要定位的目标元素。右键点击该元素,选择“Copy” -> “Copy selector”。复制的 CSS 选择器可以直接用于 By.CSS_SELECTOR。

示例代码:在 Shadow Root 中定位元素

接着上面的代码片段:

# ... (前面的代码,直到获取 shadow_root) ...if shadow_root:    print("成功获取 Shadow Root。")    try:        # 在 Shadow Root 中定位目标元素        # 假设我们要找的是一个 ID 为 "instance" 的 input 元素        # 使用 By.ID 或 By.CSS_SELECTOR 都可以        target_element_in_shadow = shadow_root.find_element(By.ID, "instance")        # 或者 target_element_in_shadow = shadow_root.find_element(By.CSS_SELECTOR, '#instance')        if target_element_in_shadow:            print(f"成功定位到 Shadow DOM 中的元素: {target_element_in_shadow.tag_name}, ID: {target_element_in_shadow.get_attribute('id')}")            # 对定位到的元素进行操作,例如输入文本            target_element_in_shadow.send_keys("Hello Shadow DOM!")            print("已向元素输入文本。")        else:            print("未能在 Shadow Root 中定位到目标元素。")    except Exception as e:        print(f"在 Shadow Root 中定位元素时发生错误: {e}")else:    print("未能获取 Shadow Root,无法在其内部定位元素。")# ... (finally 块,关闭 driver) ...

完整示例代码

将上述步骤整合,形成一个完整的自动化脚本:

from selenium import webdriverfrom selenium.webdriver.common.by import Byfrom selenium.webdriver.support.ui import WebDriverWaitfrom selenium.webdriver.support import expected_conditions as EC# 定义目标 URL 和 Shadow DOM 宿主元素的 CSS 选择器# 请根据实际情况修改这些值LOGIN_URL = 'https://sso-login.revelup.com' # 示例 URL,请替换SHADOW_HOST_SELECTOR = '#login-container' # 假设 Shadow DOM 挂载在一个 ID 为 'login-container' 的元素上TARGET_INPUT_ID = 'instance' # Shadow DOM 内部目标 input 元素的 IDdef access_shadow_dom_element(url, shadow_host_selector, target_element_id):    driver = webdriver.Chrome()    driver.get(url)    driver.implicitly_wait(7) # 设置隐式等待,等待元素加载    try:        print(f"尝试访问 URL: {url}")        # 步骤 1: 获取 Shadow Root        # 首先等待 Shadow DOM 的宿主元素出现        print(f"等待 Shadow DOM 宿主元素 ({shadow_host_selector}) 出现...")        WebDriverWait(driver, 15).until(            EC.presence_of_element_located((By.CSS_SELECTOR, shadow_host_selector))        )        print("宿主元素已出现。")        # 构建 JavaScript 脚本来获取 Shadow Root        shadow_root_script = f"return document.querySelector('{shadow_host_selector}').shadowRoot"        shadow_root = driver.execute_script(shadow_root_script)        if shadow_root:            print("成功获取 Shadow Root。")            # 步骤 2: 在 Shadow Root 中定位目标元素            print(f"在 Shadow Root 中定位目标元素 (ID: {target_element_id})...")            # 使用 WebDriverWait 显式等待 Shadow DOM 内部元素出现            target_element = WebDriverWait(shadow_root, 10).until(                EC.presence_of_element_located((By.ID, target_element_id))            )            if target_element:                print(f"成功定位到 Shadow DOM 中的元素: {target_element.tag_name}, ID: {target_element.get_attribute('id')}")                # 对定位到的元素进行操作                target_element.send_keys("MySecretPassword")                print("已向目标元素输入文本。")                # 示例:获取输入框的值                print(f"输入框当前的值: {target_element.get_attribute('value')}")            else:                print("未能在 Shadow Root 中定位到目标元素。")        else:            print("未能获取 Shadow Root,请检查宿主选择器或页面结构。")    except Exception as e:        print(f"自动化过程中发生错误: {e}")    finally:        print("关闭 WebDriver。")        driver.quit()# 调用函数执行自动化流程if __name__ == "__main__":    access_shadow_dom_element(LOGIN_URL, SHADOW_HOST_SELECTOR, TARGET_INPUT_ID)

注意事项与总结

CSS 选择器是关键: 在 Shadow DOM 中定位元素时,CSS 选择器是最可靠和推荐的方法。确保你获取的 CSS 选择器是准确且唯一的。等待机制: 即使使用了 implicitly_wait,也强烈建议对 Shadow DOM 的宿主元素和 Shadow DOM 内部的元素使用 WebDriverWait 进行显式等待。这可以避免在元素尚未完全加载时尝试定位而导致的错误。JavaScript 路径的准确性: 获取 Shadow Root 的 JavaScript 路径必须非常精确。任何微小的错误都可能导致 execute_script 返回 None 或抛出 JavaScript 错误。嵌套 Shadow DOM: 如果存在多层嵌套的 Shadow DOM,你需要逐层获取 Shadow Root。例如,先获取第一层 Shadow Root,然后在这个 Shadow Root 对象上执行 JavaScript 来获取第二层 Shadow Root,以此类推。跨浏览器兼容性: 虽然本文主要以 Chrome 为例,但这种通过 execute_script 访问 shadowRoot 的方法在支持 Shadow DOM 的现代浏览器中通常是通用的。

通过掌握上述方法,你可以有效地使用 Selenium 和 Python 应对 Shadow DOM 带来的自动化挑战,确保测试脚本能够稳定地与现代 Web 应用进行交互。

以上就是使用 Selenium 和 Python 访问 Shadow DOM 中的元素的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/593439.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
苹果内存有几种
上一篇 2025年11月10日 17:00:27
Mac玩‎《奇妙料理餐厅》教程:苹果电脑畅玩iOS手游攻略
下一篇 2025年11月10日 17:00:30

相关推荐

  • composer require-dev和require有什么不同_Composer Require与Require-Dev区别解析

    require用于声明项目运行必需的依赖,如框架、数据库组件和第三方SDK,这些包会随项目部署到生产环境;2. require-dev用于声明仅在开发和测试阶段需要的工具,如PHPUnit、PHPStan、Faker等,不会默认部署到生产环境;3. 安装时composer install根据环境决定…

    2026年5月10日
    1000
  • 修复Django电商项目中AJAX过滤产品列表图片不显示问题

    在Django电商项目中,当使用AJAX动态加载过滤后的产品列表时,常遇到图片无法正常显示的问题。这通常是由于前端模板中图片加载方式(如data-setbg属性结合JavaScript库)与AJAX动态内容更新机制不兼容所致。解决方案是直接在AJAX返回的HTML中使用标准的标签来渲染图片,确保浏览…

    2026年5月10日
    000
  • 开源免费PHP工具 PHP开发效率提升利器

    推荐开源免费PHP开发工具以提升效率:VS Code、Sublime Text轻量高效,PhpStorm专业强大;调试用Xdebug、Kint、Ray;依赖管理选Composer;代码质量工具包括PHPStan、Psalm、PHP_CodeSniffer;数据库管理可用%ignore_a_1%MyA…

    2026年5月10日
    000
  • Matplotlib 地图中多类型图例的创建与优化

    Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化Matplotlib 地图中多类型图例的创建与优化

    本教程旨在解决matplotlib地图可视化中,如何在一个图例中同时展示颜色块(如区域分类)和自定义标记(如特定兴趣点)的问题。文章详细介绍了当传统`patch`对象无法正确显示标记时,如何利用`matplotlib.lines.line2d`创建标记图例句柄,并将其与颜色块图例句柄合并,从而生成一…

    2026年5月10日 用户投稿
    100
  • Golang JSON序列化:控制敏感字段暴露的最佳实践

    本教程探讨golang中如何高效控制结构体字段在json序列化时的可见性。当需要将包含敏感信息的结构体数组转换为json响应时,通过利用`encoding/json`包提供的结构体标签,特别是`json:”-“`,可以轻松实现对特定字段的忽略,从而避免敏感数据泄露,确保api…

    2026年5月10日
    000
  • 利用海象运算符简化条件赋值:Python教程与最佳实践

    本文旨在探讨Python中海象运算符(:=)在条件赋值场景下的应用。通过对比传统if/else语句与海象运算符,以及条件表达式,分析海象运算符在简化代码、提高可读性方面的优势与局限性。并通过具体示例,展示如何在列表推导式等场景下合理使用海象运算符,同时强调其潜在的复杂性及替代方案,帮助开发者更好地掌…

    2026年5月10日
    000
  • Debian syslog性能优化技巧有哪些

    提升Debian系统syslog (通常基于rsyslog)性能,关键在于精简配置和高效处理日志。以下策略能有效优化日志管理,提升系统整体性能: 精简配置,高效加载: 在rsyslog配置文件中,仅加载必要的输入、输出和解析模块。 使用全局指令设置日志级别和格式,避免不必要的处理。 自定义模板: 创…

    2026年5月10日
    000
  • 比特币新手教程 比特币交易平台有哪些

    比特币是一种去中心化的数字货币,基于区块链技术实现点对点交易,具有匿名性、有限发行和不可篡改等特点;新手可通过交易所购买,P2P交易获得比特币,常用平台包括Binance、OKX和Huobi;交易流程包括注册账户、实名认证、绑定支付方式、充值法币并下单购买,可选择市价单或限价单;比特币存储方式有交易…

    2026年5月10日
    000
  • c++中的SFINAE技术是什么_c++模板编程中的SFINAE原理与应用

    SFINAE 是“替换失败不是错误”的原则,指模板实例化时若参数替换导致错误,只要存在其他合法候选,编译器不报错而是继续重载决议。它用于条件启用模板、类型检测等场景,如通过 decltype 或 enable_if 控制函数重载,实现类型特征判断。尽管 C++20 引入 Concepts 简化了部分…

    2026年5月10日
    000
  • Go语言mgo查询构建:深入理解bson.M与日期范围查询的正确实践

    本文旨在解决go语言mgo库中构建复杂查询时,特别是涉及嵌套`bson.m`和日期范围筛选的常见错误。我们将深入剖析`bson.m`的类型特性,解释为何直接索引`interface{}`会导致“invalid operation”错误,并提供一种推荐的、结构清晰的代码重构方案,以确保查询条件能够正确…

    2026年5月10日
    100
  • css max-height属性怎么用

    max-height 属性设置元素的最大高度。 说明 该属性值会对元素的高度设置一个最高限制。因此,元素可以比指定值矮,但不能比其高。不允许指定负值。 注意:max-height 属性不包括外边距、边框和内边距。 立即学习“前端免费学习笔记(深入)”; 值描述none 默认。定义对元素被允许的最大高…

    2026年5月10日
    100
  • vscode上怎么运行html_vscode上运行html步骤【指南】

    首先保存文件为.html格式,再通过浏览器或Live Server插件打开预览;推荐安装Live Server实现本地服务器运行与实时刷新,提升开发体验。 在 VS Code 上运行 HTML 文件并不需要复杂的配置,只需几个简单步骤即可预览页面效果。VS Code 本身是一个代码编辑器,不直接运行…

    2026年5月10日
    100
  • RichHandler与Rich Progress集成:解决显示冲突的教程

    在使用rich库的`richhandler`进行日志输出并同时使用`progress`组件时,可能会遇到显示错乱或溢出问题。这通常是由于为`richhandler`和`progress`分别创建了独立的`console`实例导致的。解决方案是确保日志处理器和进度条组件共享同一个`console`实例…

    2026年5月10日
    000
  • 修复点击时按钮抖动:CSS垂直对齐实践

    本文探讨了在Web开发中,交互式按钮(如播放/暂停按钮)在点击时发生意外垂直位移的问题。通过分析CSS样式变化对元素布局的影响,我们发现这是由于按钮不同状态下的边框样式和内边距改变,以及默认的垂直对齐行为共同作用所致。核心解决方案是利用CSS的vertical-align属性,将其设置为middle…

    2026年5月10日
    000
  • Golang goroutine与channel调试技巧

    使用go run -race检测数据竞争,结合runtime.NumGoroutine监控协程数量,通过pprof分析阻塞调用栈,利用select超时避免永久阻塞,有效排查goroutine泄漏、死锁和数据竞争问题。 Go语言的goroutine和channel是并发编程的核心,但它们也带来了调试上…

    2026年5月10日
    000
  • 《魔兽世界》将于6月11日开启国服回归技术测试

    《魔兽世界》将于6月11日开启国服回归技术测试《魔兽世界》将于6月11日开启国服回归技术测试《魔兽世界》将于6月11日开启国服回归技术测试《魔兽世界》将于6月11日开启国服回归技术测试

    《%ign%ignore_a_1%re_a_1%》官方宣布,将于6月11日开启国服回归技术测试,时间为7天,并称可以在6月内正式开服,玩家们可以访问官网下载战网客户端并预下载“巫妖王之怒”客户端,技术测试详情见下图。 WordAi WordAI是一个AI驱动的内容重写平台 53 查看详情 以上就是《…

    2026年5月10日 用户投稿
    200
  • 使用 Jupyter Notebook 进行探索性数据分析

    Jupyter Notebook通过单元格实现代码与Markdown结合,支持数据导入(pandas)、清洗(fillna)、探索(matplotlib/seaborn可视化)、统计分析(describe/corr)和特征工程,便于记录与分享分析过程。 Jupyter Notebook 是进行探索性…

    2026年5月10日
    000
  • 如何在HTML中插入表单元素_HTML表单控件与输入类型使用指南

    HTML表单通过标签构建,包含action和method属性定义数据提交目标与方式,常用input类型如text、password、email等适配不同输入需求,配合label、required、placeholder提升可用性,结合textarea、select、button等控件实现完整交互,是…

    2026年5月10日
    000
  • 前端缓存策略与JavaScript存储管理

    根据数据特性选择合适的存储方式并制定清晰的读写与清理逻辑,能显著提升前端性能;合理运用Cookie、localStorage、sessionStorage、IndexedDB及Cache API,结合缓存策略与定期清理机制,可在保证用户体验的同时避免安全与性能隐患。 前端缓存和JavaScript存…

    2026年5月10日
    100
  • 网站标题关键词更新后,搜索引擎为何仍显示旧标题?

    网站标题更新后,搜索引擎为何显示旧标题? 网站SEO优化中,站长常修改网站标题关键词,期望搜索结果显示自定义标题。然而,即使更新标签、meta keywords、meta description和结构化数据中的name属性后,搜索结果仍显示旧标题,这令人费解。本文将对此进行解释。 问题:站长修改了网…

    2026年5月10日
    100

发表回复

登录后才能评论
关注微信