深入理解Puppeteer的元素评估方法:.$eval()与.$$eval()

深入理解puppeteer的元素评估方法:.$eval()与.$$eval()

在进行网页自动化或数据抓取时,Puppeteer提供了强大的能力来与页面DOM进行交互。其中,page.$eval()和page.$$eval()(以及它们的元素句柄版本elementHandle.$eval()和elementHandle.$$eval())是执行JavaScript代码并获取DOM元素信息的关键方法。理解它们的区别和正确使用方式对于高效编写Puppeteer脚本至关重要。

1. 理解.$eval():针对单个元素的评估

.$eval(selector, pageFunction)方法用于在浏览器环境中执行一个pageFunction,并将其结果返回给Node.js环境。它的核心特点是:

它只对页面中第一个匹配selector的元素执行pageFunction。pageFunction会接收到这个匹配到的DOM元素作为其第一个参数。

示例:提取单个元素的HTML内容

假设我们需要从一个ID为#words的容器中,提取第一个div元素的内部HTML。

const puppeteer = require('puppeteer');(async () => {    const browser = await puppeteer.launch();    const page = await browser.newPage();    await page.goto('https://monkeytype.com/', { waitUntil: 'domcontentloaded' });    // 等待 #words 元素出现    const wordsSelector = await page.waitForSelector('#words');    // 使用 .$eval 提取第一个 div 的 innerHTML    const innerHtml = await wordsSelector.$eval('div', wordsDiv => wordsDiv.innerHTML);    console.log("第一个div的innerHTML:", innerHtml); // 预期输出如 ...    await browser.close();})();

在这个例子中,wordsDiv参数在pageFunction中代表了#words元素内部第一个匹配div选择器的DOM元素,我们可以直接访问它的innerHTML属性。

2. 理解.$$eval():针对多个元素的评估

.$$eval(selector, pageFunction)方法同样用于在浏览器环境中执行pageFunction,但它与.$eval()有显著不同:

它对页面中所有匹配selector的元素执行pageFunction。pageFunction会接收到一个DOM元素数组作为其第一个参数。

常见误区与正确用法

许多初学者在使用.$$eval()时,会错误地认为pageFunction中的参数是单个DOM元素,并尝试直接访问其属性,例如:

// 错误示例:尝试直接访问数组的 innerHTML 属性// const words = await wordsSelector.$$eval('div', elements => elements.innerHTML);// 这里的 elements 是一个数组,elements.innerHTML 将是 undefined

正确的做法是,在pageFunction内部,你需要遍历或映射这个DOM元素数组,对每个元素执行操作。

示例:提取所有匹配元素的HTML内容

为了提取#words容器内所有.word元素的内部HTML,我们需要在pageFunction中对传入的元素数组进行映射:

const puppeteer = require('puppeteer');(async () => {    const browser = await puppeteer.launch({ headless: true });    const [page] = await browser.pages();    await page.goto('https://monkeytype.com/', { waitUntil: 'domcontentloaded' });    // 接受 Cookies    const rejectAllButton = await page.waitForSelector('.rejectAll');    if (rejectAllButton) {        await rejectAllButton.click();    }    // 等待第一个活跃的单词出现,确保页面加载完成    await page.waitForSelector('#words .word.active');    const wordsEl = await page.$('#words'); // 获取 #words 元素句柄    // 使用 $$eval 提取所有 .word 元素的 innerHTML    const wordsHtmlArray = await wordsEl.$$eval('.word', els =>        els.map(el => el.innerHTML) // 对每个元素执行 .innerHTML 操作    );    console.log("所有单词的HTML:", wordsHtmlArray); // 预期输出如 ["...", ...]    await browser.close();})();

在这个例子中,els是一个包含所有.word元素的数组。我们使用map方法遍历这个数组,对每个元素el获取其innerHTML,最终返回一个包含所有HTML字符串的数组。

最佳实践:使用.textContent

在大多数情况下,如果你只需要元素的纯文本内容,推荐使用.textContent而不是.innerHTML。.textContent会返回元素及其所有子元素的文本内容,不包含任何HTML标签,这通常更简洁且不易出错。

// 提取所有 .word 元素的纯文本内容const wordsTextArray = await wordsEl.$$eval('.word', els =>    els.map(el => el.textContent.trim()) // 使用 .textContent 并去除首尾空白);console.log("所有单词的文本:", wordsTextArray); // 预期输出如 ["interest", "word", ...]

3. 高级应用:模拟打字测试与请求拦截

.$eval()和.$$eval()是构建复杂自动化脚本的基础。结合其他Puppeteer功能,我们可以实现更高级的交互,例如自动化一个打字测试网站。

下面的示例展示了如何:

启动一个无头浏览器。拦截并过滤网络请求,以优化性能或避免不必要的资源加载。导航到打字测试网站。模拟用户点击接受Cookie。在一个循环中识别当前需要输入的单词,并使用type()方法模拟键盘输入。捕获打字测试结果的截图。

const puppeteer = require("puppeteer");let browser;(async () => {  browser = await puppeteer.launch({headless: true}); // 启动无头浏览器  const [page] = await browser.pages();  const url = "https://monkeytype.com/";  // 启用请求拦截  await page.setRequestInterception(true);  const allowed = [    "https://monkeytype.com",    "https://www.monkeytype.com",    "https://api.monkeytype.com",    "https://fonts.google", // 允许加载字体文件  ];  page.on("request", request => {    // 只允许特定域名的请求通过,其他请求一律阻止    if (allowed.some(e => request.url().startsWith(e))) {      request.continue();    }    else {      request.abort();    }  });  await page.goto(url, {waitUntil: "domcontentloaded"}); // 导航到页面  // 辅助函数,等待选择器并返回元素句柄  const $ = (...args) => page.waitForSelector(...args);  // 点击接受Cookies按钮(如果存在)  const rejectAllButton = await $(".rejectAll");  if (rejectAllButton) {      await rejectAllButton.click();  }  // 等待第一个活跃的单词出现  await $("#words .word.active");  const wordsContainer = await page.$("#words"); // 获取单词容器的句柄  try {    // 循环直到无法找到下一个活跃单词(表示测试结束)    for (;;) {      // 使用 .$eval 提取当前活跃单词的文本内容      const word = await wordsContainer.$eval(".word.active", el =>        el.textContent.trim()      );      // 模拟键盘输入单词,并在末尾加上空格      await wordsContainer.type(word + " ");    }  }  catch (err) {    // 捕获循环结束时的错误(例如找不到 .word.active 元素)    console.log("打字测试结束或发生错误:", err.message);  }  // 等待结果显示  const results = await $("#result");  // 滚动到结果区域,确保截图可见  await results.evaluate(el => el.scrollIntoView());  // 截取结果区域的屏幕截图  await results.screenshot({path: "typing-results.png"});  console.log("打字结果截图已保存为 typing-results.png");})()  .catch(err => console.error("自动化过程中发生错误:", err))  .finally(() => browser?.close()) // 无论成功失败,最后都关闭浏览器;

注意事项:

请求拦截: page.setRequestInterception(true) 开启拦截,page.on(‘request’, …) 监听请求并决定是continue()(继续)还是abort()(阻止)。这对于减少页面加载时间、过滤广告或特定资源非常有用。元素句柄的.$eval(): 在循环中,我们使用wordsContainer.$eval(),而不是page.$eval()。这是因为wordsContainer是一个元素句柄,在其上下文中使用.$eval()可以提高效率,因为它只在该元素的子树中查找匹配的元素。错误处理: try…catch块用于优雅地处理打字测试结束时可能出现的错误(例如,当不再有.word.active元素时,.$eval会抛出错误)。资源管理: finally块确保无论脚本执行成功与否,浏览器实例都会被关闭,避免资源泄露。

总结

.$eval()和.$$eval()是Puppeteer中执行页面内JavaScript评估的核心工具。正确理解它们之间的区别——.$eval()处理单个元素,.$$eval()处理元素数组——并掌握在pageFunction中如何操作这些元素,是编写健壮、高效Puppeteer脚本的关键。结合请求拦截、模拟用户输入等高级功能,你可以构建出功能强大的自动化解决方案。在实际应用中,优先使用.textContent进行文本提取,并始终注意资源管理和错误处理。

以上就是深入理解Puppeteer的元素评估方法:.$eval()与.$$eval()的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1602700.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
JavaScript动态加载HTML Head标签中的CSS/JS文件
上一篇 2025年12月23日 16:34:08
HTML5 视频播放器中的音量控制与静音同步管理
下一篇 2025年12月23日 16:34:17

相关推荐

  • win8安全中心服务打不开_win8安全中心服务无法启动解决方法

    首先检查并启动Security Center、Windows Defender和Windows Firewall服务,若无效则运行sfc /scannow修复系统文件,再通过PowerShell重新注册应用组件,卸载第三方安全软件排除冲突,最后检查注册表HKEY_LOCAL_MACHINESOFTW…

    2026年8月30日
    000
  • Win7系统Win键失效了如何修复?Win7系统Win键失效教程

    在使用Win7系统时,Win键作为常用快捷键之一,有时可能会出现无法正常使用的情况。本文提供几种有效的解决方法,帮助大家快速应对这一问题。 所需工具为常规的键盘和鼠标,并按照以下步骤进行操作。处理方式包括检查键盘相关设置、更新驱动程序以及重启电脑等。操作过程中请保持耐心,避免误操作导致其他故障。通过…

    2026年8月30日
    000
  • 如何利用IDEA自带工具分析jmap导出文件并解读堆内存数据?

    利用IDEA自带工具分析jmap堆内存快照:解读与局限 高效排查Java应用内存泄漏和性能瓶颈,离不开对堆内存的深入分析。jmap命令生成的堆内存快照文件(.hprof), 结合IDEA自带的分析工具,能帮助开发者快速了解内存使用情况。本文将详解如何解读IDEA分析结果,并指出其局限性。 IDEA的…

    2026年8月30日
    000
  • 如何使用Composer解决PrestaShop邮件订阅模块的安装问题?

    可以通过一下地址学习composer:学习地址 在使用 prestashop 开发电商平台时,邮件订阅功能是一个非常重要的营销工具,可以帮助商家与客户保持联系,推广最新产品和促销信息。然而,当我尝试为我的 prestashop 商店添加邮件订阅模块时,却遇到了不少问题。首先,我发现直接从 prest…

    用户投稿 2026年8月30日
    000
  • 电脑提示”无法初始化这个硬件的设备驱动程序 (代码37)”的解决方法

    电脑提示”无法初始化这个硬件的设备驱动程序 (代码37)”的解决方法电脑提示”无法初始化这个硬件的设备驱动程序 (代码37)”的解决方法电脑提示”无法初始化这个硬件的设备驱动程序 (代码37)”的解决方法电脑提示”无法初始化这个硬件的设备驱动程序 (代码37)”的解决方法

    在电脑使用过程中,有些用户可能会在设备管理器中看到“无法初始化这个硬件的设备驱动程序(代码37)”的提示。这类问题通常意味着某个硬件的驱动程序未能成功加载或初始化,从而导致该设备无法正常运行。以下是几种常见的应对方法,帮助你快速排查并修复此类故障。 一、重启计算机 有时系统临时性错误或驱动加载异常会…

    2026年8月30日 用户投稿
    000
  • 如何查看Linux软件包变更记录 rpm -q changelog解析

    如何查看Linux软件包变更记录 rpm -q changelog解析如何查看Linux软件包变更记录 rpm -q changelog解析如何查看Linux软件包变更记录 rpm -q changelog解析如何查看Linux软件包变更记录 rpm -q changelog解析

    查看变更日志有助于排查升级问题、确认安全补丁和判断关键修复。1. 使用 rpm -q –changelog 可查看已安装包的变更记录;2. 若未安装,可从官方仓库下载 .rpm 文件后用 rpm -qp 查看;3. 输出过多时可用 grep、less 或 head 过滤;4. 结合 dn…

    2026年8月30日 用户投稿
    1000
  • 电脑common.dll文件丢失怎么办 4种实用技巧帮你轻松搞定!

    电脑common.dll文件丢失怎么办 4种实用技巧帮你轻松搞定!电脑common.dll文件丢失怎么办 4种实用技巧帮你轻松搞定!电脑common.dll文件丢失怎么办 4种实用技巧帮你轻松搞定!电脑common.dll文件丢失怎么办 4种实用技巧帮你轻松搞定!

    许多用户在操作电脑时,可能会碰到“由于缺少common.dll文件,无法启动此程序”的提示,这类问题通常源于文件误删、程序安装中断或系统升级导致的冲突。别着急,下面为大家整理了几种有效的解决方案: 方法一:重新安装出问题的软件适用于仅在打开某个特定程序时出现错误的情形: 进入控制面板 → 程序和功能…

    2026年8月30日 用户投稿
    000
  • win8怎么设置静态ip地址_win8静态ip地址设置步骤

    首先通过控制面板、命令提示符或高级网络设置配置静态IP和DNS,具体步骤包括打开网络共享中心、修改IPv4属性或使用netsh命令,最终保存设置并验证网络连接。 如果您尝试访问某个网站,但服务器无法访问,则可能是由于IP地址配置不当导致网络连接失败。以下是解决此问题的步骤: 本文运行环境:联想小新P…

    2026年8月30日
    000
  • 安装VC++2015提示0x80070666错误怎么办?全面修复方案来了

    安装VC++2015提示0x80070666错误怎么办?全面修复方案来了安装VC++2015提示0x80070666错误怎么办?全面修复方案来了安装VC++2015提示0x80070666错误怎么办?全面修复方案来了安装VC++2015提示0x80070666错误怎么办?全面修复方案来了

    在运行某些游戏、设计类软件或开发#%#$#%@%@%$#%$#%#%#$%@_20dc++e2c6fa909a5cd62526615fe2788a时,你可能经常会碰到一个令人头疼的问题:安装 microsoft visual c++ 2015 运行库时弹出错误代码 0x80070666,导致安装中断…

    2026年8月30日 用户投稿
    200
  • 金士顿NV3PCIe 4.0 NVMe固态硬盘推出全新规格

    2025年7月8日北京消息,知名存储品牌金士顿今日宣布,在原有2280规格基础上,正式发布全新的NV3PCIe 4.0 NVMe M.2 2230固态硬盘。该产品适用于笔记本、超薄本、迷你PC(NUC)以及掌机等多种设备类型,为那些需要高速度、低功耗,并且对主机内部空间要求较高的用户提供了一个新的升…

    2026年8月30日
    100
  • 小红书如何优化商品购买链接 小红书电商功能的使用技巧

    优化小红书商品购买链接的核心是打造从内容到交易的无缝信任旅程,需以优质内容为基础,将链接自然融入笔记、评论或直播中,避免生硬插入;2. 优先使用“薯店”实现平台内闭环交易,提升加载速度与用户信任,降低跳转流失;3. 利用“合集”功能整合主题内容,形成系统化购物指南,提升连带销售与用户停留时长;4. …

    2026年8月30日
    000
  • 如何为iPhoneSE2022获取固件?快速下载操作教程

    首先使用iTunes或Finder通过按住Shift(Windows)或Option(macOS)键点击“检查更新”来自动下载iPhone SE(2022年款)的官方固件;其次可借助爱思助手或3uTools等可信第三方工具选择并下载指定iOS版本固件;最后还可访问ipsw.me等可靠网站手动下载IP…

    2026年8月30日
    000
  • win10怎么截图_win10截图的快捷键与多种方法

    使用PrintScreen键可将全屏截图复制到剪贴板,再粘贴至画图等应用保存;2. 按Win+PrintScreen可自动将全屏截图以PNG格式保存至“图片/屏幕截图”文件夹;3. Alt+PrintScreen用于截取当前活动窗口并复制到剪贴板;4. Win+Shift+S调出系统截图工具栏,支持…

    2026年8月30日
    100
  • 悟空浏览器能看电视剧吗怎么看

    悟空浏览器确实可以免费看电视剧,无需额外开通会员,其内置聚合视频功能整合了多个平台资源,涵盖热播剧、经典剧、电影、综艺等,用户只需打开app点击“视频”或“影视”入口,或直接搜索剧名如“庆余年第二部”,即可选择播放源观看,操作简单适合各类用户,更新速度紧跟官方节奏,但播放时可能有广告,部分高清资源需…

    2026年8月30日
    000
  • u盘重装系统后桌面文件如何恢复,重装系统后的u盘怎么恢复

    一、准备工作 在开始恢复桌面文件前,请准备好以下工具: 1. U盘:用于存放恢复软件及备份所需数据。 2. 数据恢复工具:建议使用知名软件EaseUS Data Recovery Wizard,它能有效找回误删或丢失的文件。 二、操作步骤 1. 将U盘连接至电脑,并安装好数据恢复软件。 2. 打开软…

    2026年8月30日
    000
  • win10注册表怎么打开_win10注册表编辑器打开方式

    1、通过Win+R输入regedit可快速打开注册表编辑器;2、开始菜单搜索“注册表编辑器”并以管理员身份运行;3、任务管理器中创建新任务regedit并勾选管理员权限;4、资源管理器进入System32找到regedit.exe运行;5、命令提示符或PowerShell输入regedit启动。 如…

    2026年8月30日
    000
  • 《马里奥赛车:世界》非官方互动地图应用突然下架

    《马里奥赛车:世界》的开放探索地图规模巨大,再加上将近400个p-switch挑战任务需要发现并完成,想要一一记录和追踪并不容易。幸运的是,玩家们一直在寻找解决办法,虽然任天堂似乎已经下架了其中一款工具,但仍有一些免费替代方案可供使用。 曾有一款名为“MK世界旅行指南”的非官方辅助应用,它在iOS应…

    2026年8月30日
    000
  • Vite构建UMD库后,如何避免全局污染直接在HTML中调用导出方法?

    本文探讨如何安全地在HTML中调用使用Vite构建的UMD库导出的方法,避免全局命名空间污染。 Vite配置已指向导出canvasEditorFun对象的src/main.ts文件,该对象包含initEditorByFile、getHTML、saveCEData、initEditorByData等方…

    2026年8月30日
    000
  • 如何解决PrestaShop图表显示问题?使用prestashop/graphnvd3可以提升你的数据可视化效果

    可以通过一下地址学习composer:学习地址 在使用prestashop进行电商运营时,数据可视化是非常重要的一部分。通过图表,我们可以直观地了解销售趋势、客户行为等关键信息。然而,在使用prestashop的默认图表功能时,我遇到了一个问题:图表显示效果不佳,数据不够直观,严重影响了我的分析效率…

    用户投稿 2026年8月30日
    000
  • 视频号视频怎么分组?分组功能在哪?

    随着视频号内容不断增多,如何按主题进行归类整理,以便自己和粉丝更方便地浏览?其实,微信视频号提供了“合集”功能,能够轻松实现视频的分类与分组。本文将详细讲解如何创建和管理视频合集,助你打造清晰有序的主页布局。 一、如何对视频号视频进行分组? 视频号中的“分组”功能,官方称为“合集”。通过该功能,你可…

    2026年8月30日
    200

发表回复

登录后才能评论
关注微信