深入理解Puppeteer的元素评估方法:.$eval()与.$$eval()

深入理解puppeteer的元素评估方法:.$eval()与.$$eval()

在进行网页自动化或数据抓取时,Puppeteer提供了强大的能力来与页面DOM进行交互。其中,page.$eval()和page.$$eval()(以及它们的元素句柄版本elementHandle.$eval()和elementHandle.$$eval())是执行JavaScript代码并获取DOM元素信息的关键方法。理解它们的区别和正确使用方式对于高效编写Puppeteer脚本至关重要。

1. 理解.$eval():针对单个元素的评估

.$eval(selector, pageFunction)方法用于在浏览器环境中执行一个pageFunction,并将其结果返回给Node.js环境。它的核心特点是:

它只对页面中第一个匹配selector的元素执行pageFunction。pageFunction会接收到这个匹配到的DOM元素作为其第一个参数。

示例:提取单个元素的HTML内容

假设我们需要从一个ID为#words的容器中,提取第一个div元素的内部HTML。

const puppeteer = require('puppeteer');(async () => {    const browser = await puppeteer.launch();    const page = await browser.newPage();    await page.goto('https://monkeytype.com/', { waitUntil: 'domcontentloaded' });    // 等待 #words 元素出现    const wordsSelector = await page.waitForSelector('#words');    // 使用 .$eval 提取第一个 div 的 innerHTML    const innerHtml = await wordsSelector.$eval('div', wordsDiv => wordsDiv.innerHTML);    console.log("第一个div的innerHTML:", innerHtml); // 预期输出如 ...    await browser.close();})();

在这个例子中,wordsDiv参数在pageFunction中代表了#words元素内部第一个匹配div选择器的DOM元素,我们可以直接访问它的innerHTML属性。

2. 理解.$$eval():针对多个元素的评估

.$$eval(selector, pageFunction)方法同样用于在浏览器环境中执行pageFunction,但它与.$eval()有显著不同:

它对页面中所有匹配selector的元素执行pageFunction。pageFunction会接收到一个DOM元素数组作为其第一个参数。

常见误区与正确用法

许多初学者在使用.$$eval()时,会错误地认为pageFunction中的参数是单个DOM元素,并尝试直接访问其属性,例如:

// 错误示例:尝试直接访问数组的 innerHTML 属性// const words = await wordsSelector.$$eval('div', elements => elements.innerHTML);// 这里的 elements 是一个数组,elements.innerHTML 将是 undefined

正确的做法是,在pageFunction内部,你需要遍历或映射这个DOM元素数组,对每个元素执行操作。

示例:提取所有匹配元素的HTML内容

为了提取#words容器内所有.word元素的内部HTML,我们需要在pageFunction中对传入的元素数组进行映射:

const puppeteer = require('puppeteer');(async () => {    const browser = await puppeteer.launch({ headless: true });    const [page] = await browser.pages();    await page.goto('https://monkeytype.com/', { waitUntil: 'domcontentloaded' });    // 接受 Cookies    const rejectAllButton = await page.waitForSelector('.rejectAll');    if (rejectAllButton) {        await rejectAllButton.click();    }    // 等待第一个活跃的单词出现,确保页面加载完成    await page.waitForSelector('#words .word.active');    const wordsEl = await page.$('#words'); // 获取 #words 元素句柄    // 使用 $$eval 提取所有 .word 元素的 innerHTML    const wordsHtmlArray = await wordsEl.$$eval('.word', els =>        els.map(el => el.innerHTML) // 对每个元素执行 .innerHTML 操作    );    console.log("所有单词的HTML:", wordsHtmlArray); // 预期输出如 ["...", ...]    await browser.close();})();

在这个例子中,els是一个包含所有.word元素的数组。我们使用map方法遍历这个数组,对每个元素el获取其innerHTML,最终返回一个包含所有HTML字符串的数组。

最佳实践:使用.textContent

在大多数情况下,如果你只需要元素的纯文本内容,推荐使用.textContent而不是.innerHTML。.textContent会返回元素及其所有子元素的文本内容,不包含任何HTML标签,这通常更简洁且不易出错。

// 提取所有 .word 元素的纯文本内容const wordsTextArray = await wordsEl.$$eval('.word', els =>    els.map(el => el.textContent.trim()) // 使用 .textContent 并去除首尾空白);console.log("所有单词的文本:", wordsTextArray); // 预期输出如 ["interest", "word", ...]

3. 高级应用:模拟打字测试与请求拦截

.$eval()和.$$eval()是构建复杂自动化脚本的基础。结合其他Puppeteer功能,我们可以实现更高级的交互,例如自动化一个打字测试网站。

下面的示例展示了如何:

启动一个无头浏览器。拦截并过滤网络请求,以优化性能或避免不必要的资源加载。导航到打字测试网站。模拟用户点击接受Cookie。在一个循环中识别当前需要输入的单词,并使用type()方法模拟键盘输入。捕获打字测试结果的截图。

const puppeteer = require("puppeteer");let browser;(async () => {  browser = await puppeteer.launch({headless: true}); // 启动无头浏览器  const [page] = await browser.pages();  const url = "https://monkeytype.com/";  // 启用请求拦截  await page.setRequestInterception(true);  const allowed = [    "https://monkeytype.com",    "https://www.monkeytype.com",    "https://api.monkeytype.com",    "https://fonts.google", // 允许加载字体文件  ];  page.on("request", request => {    // 只允许特定域名的请求通过,其他请求一律阻止    if (allowed.some(e => request.url().startsWith(e))) {      request.continue();    }    else {      request.abort();    }  });  await page.goto(url, {waitUntil: "domcontentloaded"}); // 导航到页面  // 辅助函数,等待选择器并返回元素句柄  const $ = (...args) => page.waitForSelector(...args);  // 点击接受Cookies按钮(如果存在)  const rejectAllButton = await $(".rejectAll");  if (rejectAllButton) {      await rejectAllButton.click();  }  // 等待第一个活跃的单词出现  await $("#words .word.active");  const wordsContainer = await page.$("#words"); // 获取单词容器的句柄  try {    // 循环直到无法找到下一个活跃单词(表示测试结束)    for (;;) {      // 使用 .$eval 提取当前活跃单词的文本内容      const word = await wordsContainer.$eval(".word.active", el =>        el.textContent.trim()      );      // 模拟键盘输入单词,并在末尾加上空格      await wordsContainer.type(word + " ");    }  }  catch (err) {    // 捕获循环结束时的错误(例如找不到 .word.active 元素)    console.log("打字测试结束或发生错误:", err.message);  }  // 等待结果显示  const results = await $("#result");  // 滚动到结果区域,确保截图可见  await results.evaluate(el => el.scrollIntoView());  // 截取结果区域的屏幕截图  await results.screenshot({path: "typing-results.png"});  console.log("打字结果截图已保存为 typing-results.png");})()  .catch(err => console.error("自动化过程中发生错误:", err))  .finally(() => browser?.close()) // 无论成功失败,最后都关闭浏览器;

注意事项:

请求拦截: page.setRequestInterception(true) 开启拦截,page.on(‘request’, …) 监听请求并决定是continue()(继续)还是abort()(阻止)。这对于减少页面加载时间、过滤广告或特定资源非常有用。元素句柄的.$eval(): 在循环中,我们使用wordsContainer.$eval(),而不是page.$eval()。这是因为wordsContainer是一个元素句柄,在其上下文中使用.$eval()可以提高效率,因为它只在该元素的子树中查找匹配的元素。错误处理: try…catch块用于优雅地处理打字测试结束时可能出现的错误(例如,当不再有.word.active元素时,.$eval会抛出错误)。资源管理: finally块确保无论脚本执行成功与否,浏览器实例都会被关闭,避免资源泄露。

总结

.$eval()和.$$eval()是Puppeteer中执行页面内JavaScript评估的核心工具。正确理解它们之间的区别——.$eval()处理单个元素,.$$eval()处理元素数组——并掌握在pageFunction中如何操作这些元素,是编写健壮、高效Puppeteer脚本的关键。结合请求拦截、模拟用户输入等高级功能,你可以构建出功能强大的自动化解决方案。在实际应用中,优先使用.textContent进行文本提取,并始终注意资源管理和错误处理。

以上就是深入理解Puppeteer的元素评估方法:.$eval()与.$$eval()的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/1602700.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年12月23日 16:34:08
下一篇 2025年12月23日 16:34:17

相关推荐

  • 学会从头开始学习CSS,掌握制作基本网页框架的技巧

    从零开始学习CSS,掌握网页基本框架制作技巧 前言: 在现今互联网时代,网页设计和开发是一个非常重要的技能。而学习CSS(层叠样式表)是掌握网页设计的关键之一。CSS不仅可以为网页添加样式和布局,还可以为用户呈现独特且具有吸引力的页面效果。在本文中,我将为您介绍一些基本的CSS知识,以及一些常用的代…

    2025年12月24日
    200
  • 揭秘Web标准涵盖的语言:了解网页开发必备的语言范围

    在当今数字时代,互联网成为了人们生活中不可或缺的一部分。作为互联网的基本构成单位,网页承载着我们获取和分享信息的重要任务。而网页开发作为一门独特的技术,离不开一些必备的语言。本文将揭秘Web标准涵盖的语言,让我们一起了解网页开发所需的语言范围。 首先,HTML(HyperText Markup La…

    2025年12月24日
    000
  • 揭开Web开发的语言之谜:了解构建网页所需的语言有哪些?

    Web标准中的语言大揭秘:掌握网页开发所需的语言有哪些? 随着互联网的快速发展,网页开发已经成为人们重要的职业之一。而要成为一名优秀的网页开发者,掌握网页开发所需的语言是必不可少的。本文将为大家揭示Web标准中的语言大揭秘,介绍网页开发所需的主要语言。 HTML(超文本标记语言)HTML是网页开发的…

    2025年12月24日
    400
  • 常用的网页开发语言:了解Web标准的要点

    了解Web标准的语言要点:常见的哪些语言应用在网页开发中? 随着互联网的不断发展,网页已经成为人们获取信息和交流的重要途径。而要实现一个高质量、易用的网页,离不开一种被广泛接受的Web标准。Web标准的制定和应用,涉及到多种语言和技术,本文将介绍常见的几种语言在网页开发中的应用。 首先,HTML(H…

    2025年12月24日
    000
  • 网页开发中常见的Web标准语言有哪些?

    探索Web标准语言的世界:网页开发中常用的语言有哪些? 在现代社会中,互联网的普及程度越来越高,网页已成为人们获取资讯、娱乐、交流的重要途径。而网页的开发离不开各种编程语言的应用和支持。在这个虚拟世界的网络,有许多被广泛应用的标准化语言,用于为用户提供优质的网页体验。本文将探索网页开发中常用的语言,…

    2025年12月24日
    000
  • 深入探究Web标准语言的范围,涵盖了哪些语言?

    Web标准是指互联网上的各个网页所需遵循的一系列规范,确保网页在不同的浏览器和设备上能够正确地显示和运行。这些标准包括HTML、CSS和JavaScript等语言。本文将深入解析Web标准涵盖的语言范围。 首先,HTML(HyperText Markup Language)是构建网页的基础语言。它使…

    2025年12月24日
    000
  • 深入理解CSS框架与JS之间的关系

    深入理解CSS框架与JS之间的关系 在现代web开发中,CSS框架和JavaScript (JS) 是两个常用的工具。CSS框架通过提供一系列样式和布局选项,可以帮助我们快速构建美观的网页。而JS则提供了一套功能强大的脚本语言,可以为网页添加交互和动态效果。本文将深入探讨CSS框架和JS之间的关系,…

    2025年12月24日
    000
  • 项目实践:如何结合CSS和JavaScript打造优秀网页的经验总结

    项目实践:如何结合CSS和JavaScript打造优秀网页的经验总结 随着互联网的快速发展,网页设计已经成为了各行各业都离不开的一项技能。优秀的网页设计可以给用户留下深刻的印象,提升用户体验,增加用户的黏性和转化率。而要做出优秀的网页设计,除了对美学的理解和创意的运用外,还需要掌握一些基本的技能,如…

    2025年12月24日
    200
  • CSS 超链接属性解析:text-decoration 和 color

    CSS 超链接属性解析:text-decoration 和 color 超链接是网页中常用的元素之一,它能够在不同页面之间建立连接。为了使超链接在页面中有明显的标识和吸引力,CSS 提供了一些属性来调整超链接的样式。本文将重点介绍 text-decoration 和 color 这两个与超链接相关的…

    2025年12月24日
    000
  • 学完HTML和CSS之后我应该做什么?

    网页开发是一段漫长的旅程,但是掌握了HTML和CSS技能意味着你已经赢得了一半的战斗。这两种语言对于学习网页开发技能来说非常重要和基础。现在不可或缺的是下一个问题,学完HTML和CSS之后我该做什么呢? 对这些问题的答案可以分为2-3个部分,你可以继续练习你的HTML和CSS编码,然后了解在学习完H…

    2025年12月24日
    000
  • 聊聊怎么利用CSS实现波浪进度条效果

    本篇文章给大家分享css 高阶技巧,介绍一下如何使用css实现波浪进度条效果,希望对大家有所帮助! 本文是 CSS Houdini 之 CSS Painting API 系列第三篇。 现代 CSS 之高阶图片渐隐消失术现代 CSS 高阶技巧,像 Canvas 一样自由绘图构建样式! 在上两篇中,我们…

    2025年12月24日 好文分享
    200
  • 巧用距离、角度及光影制作炫酷的 3D 文字特效

    如何利用 css 实现3d立体的数字?下面本篇文章就带大家巧用视觉障眼法,构建不一样的 3d 文字特效,希望对大家有所帮助! 最近群里有这样一个有意思的问题,大家在讨论,使用 CSS 3D 能否实现如下所示的效果: 这里的核心难点在于,如何利用 CSS 实现一个立体的数字?CSS 能做到吗? 不是特…

    2025年12月24日 好文分享
    000
  • CSS高阶技巧:实现图片渐隐消的多种方法

    将专注于实现复杂布局,兼容设备差异,制作酷炫动画,制作复杂交互,提升可访问性及构建奇思妙想效果等方面的内容。 在兼顾基础概述的同时,注重对技巧的挖掘,结合实际进行运用,欢迎大家关注。 正文从这里开始。 在过往,我们想要实现一个图片的渐隐消失。最常见的莫过于整体透明度的变化,像是这样: 立即学习“前端…

    2025年12月24日 好文分享
    000
  • 看看这些前端面试题,带你搞定高频知识点(一)

    每天10道题,100天后,搞定所有前端面试的高频知识点,加油!!!,在看文章的同时,希望不要直接看答案,先思考一下自己会不会,如果会,自己的答案是什么?想过之后再与答案比对,是不是会更好一点,当然如果你有比我更好的答案,欢迎评论区留言,一起探讨技术之美。 面试官:给定一个元素,如何实现水平垂直居中?…

    2025年12月24日 好文分享
    300
  • 看看这些前端面试题,带你搞定高频知识点(二)

    每天10道题,100天后,搞定所有前端面试的高频知识点,加油!!!,在看文章的同时,希望不要直接看答案,先思考一下自己会不会,如果会,自己的答案是什么?想过之后再与答案比对,是不是会更好一点,当然如果你有比我更好的答案,欢迎评论区留言,一起探讨技术之美。 面试官:页面导入样式时,使用 link 和 …

    2025年12月24日 好文分享
    200
  • 看看这些前端面试题,带你搞定高频知识点(三)

    每天10道题,100天后,搞定所有前端面试的高频知识点,加油!!!,在看文章的同时,希望不要直接看答案,先思考一下自己会不会,如果会,自己的答案是什么?想过之后再与答案比对,是不是会更好一点,当然如果你有比我更好的答案,欢迎评论区留言,一起探讨技术之美。 面试官:清除浮动有哪些方式? 我:呃~,浮动…

    2025年12月24日 好文分享
    000
  • 看看这些前端面试题,带你搞定高频知识点(四)

    每天10道题,100天后,搞定所有前端面试的高频知识点,加油!!!,在看文章的同时,希望不要直接看答案,先思考一下自己会不会,如果会,自己的答案是什么?想过之后再与答案比对,是不是会更好一点,当然如果你有比我更好的答案,欢迎评论区留言,一起探讨技术之美。 面试官:请你谈一下自适应(适配)的方案 我:…

    2025年12月24日 好文分享
    000
  • 看看这些前端面试题,带你搞定高频知识点(五)

    每天10道题,100天后,搞定所有前端面试的高频知识点,加油!!!,在看文章的同时,希望不要直接看答案,先思考一下自己会不会,如果会,自己的答案是什么?想过之后再与答案比对,是不是会更好一点,当然如果你有比我更好的答案,欢迎评论区留言,一起探讨技术之美。 面试官:css 如何实现左侧固定 300px…

    2025年12月24日 好文分享
    000
  • css实现登录按钮炫酷效果(附代码实例)

    今天在网上看到一个炫酷的登录按钮效果;初看时感觉好牛掰;但是一点一点的抛开以后发现,并没有那么难;我会将全部代码贴出来;如果有不对的地方,大家指点一哈。 分析 我们抛开before不谈的话;其实原理和就是通过背景大小以及配合位置达到颜色渐变的效果。 text-transform: uppercase…

    2025年12月24日
    000
  • CSS flex布局属性:align-items和align-content的区别

    在用flex布局时,发现有两个属性功能好像有点类似:align-items和align-content,乍看之下,它们都是用于定义flex容器中元素在交叉轴(主轴为flex-deriction定义的方向,默认为row,那么交叉轴跟主轴垂直即为column,反之它们互调,flex基本的概念如下图所示)…

    2025年12月24日 好文分享
    000

发表回复

登录后才能评论
关注微信