如何在puppeteer中使用XPATH "foreach“到div的子节点？
在puppeteer中使用XPath "foreach"到div的子节点，可以通过以下步骤实现：
- 首先，使用puppeteer库进行网页的自动化操作，确保已经安装了puppeteer并导入相关模块。
- 首先，使用puppeteer库进行网页的自动化操作，确保已经安装了puppeteer并导入相关模块。
- 创建一个异步函数，用于执行puppeteer操作：
- 创建一个异步函数，用于执行puppeteer操作：
- 在上述代码中，
page.$x()函数使用XPath选择器选择所有的div节点，并返回一个ElementHandle数组。然后，使用forEach循环遍历每个div节点，通过div.evaluate()函数获取节点的文本内容或其他属性。 - 注意：在实际使用时，需要根据实际网页的结构和XPath表达式进行调整。
以上是在puppeteer中使用XPath "foreach"到div的子节点的示例代码。希望能够帮助到您！
相关·内容
如何在xpath中获取以下信息？
Text 01 - link_1.com
文本02 - link_2.com
$page = '
<div class="news">
<div class="content">
<div>
<span class="title">Text 01</span>
<span class="link">link_1.com</span>
</div>
</div
浏览 2提问于2012-07-13得票数 2
回答已采纳
1回答
下面是我的代码，其中有一些目标div的元素句柄
const puppeteer = require("puppeteer");
(async () => {
const searchString = `https://www.google.com/maps/search/restaurants/@-6.4775265,112.057849,3.67z`;
const browser = await puppeteer.launch();
const page = await browser.newPage();
await page.goto(searchStr
浏览 5提问于2022-05-02得票数 0
回答已采纳
我有以下的html
$html = '<body><div style="font-color:#000">Hello</div>
<span style="what">My name is rasid</span><div>new to you
</div><div style="rashid">New here</div></body>';
$dom = new DOMDocument();
$dom-
浏览 2提问于2013-03-29得票数 2
1回答
在puppeteer中有没有办法找到一个节点的所有子节点。在Java Selenium WebDriver中，我们可以找到WebElement的所有子元素，如下所示： WebElement parent = driver.findElement(By.xpath("..."));
List<WebElement> children = parent.findElements(By.tagName("div")); 现在在puppeteer中有没有类似的方法来获取像这样的子元素。如果我像这样获取父元素/节点 var parent = await pa
浏览 72提问于2021-08-08得票数 1
回答已采纳
我正在尝试遍历页面上的几个元素，并在每个div....however中获取一些数据。看起来，xpathpage.$x(<query>)不支持上下文节点。或者我没有正确指定上下文节点：
const puppeteer = require('puppeteer');
async function scrape(url) {
console.log('scraping', url);
const res = [];
const browser = await puppeteer.launch();
const page = await b
浏览 0提问于2020-05-03得票数 2
我想在一个特定的元素上运行$x，而不是在整个页面上运行，并尝试这样做： let selector = await page.$('.myClass"]');
let [el] = await selector.$x(`//p[contains(text(), 'myTextString')]`);
pass = el ? true : false 我希望pass的计算结果是false，因为带有myClass的元素不包含myTextString，但是el不是falsy，因为myTextString存在于页面的其他地方。 有没有办法检查特定元素上的文本字符
浏览 41提问于2021-10-22得票数 0
回答已采纳
有没有一种方法可以在DOMNode上执行xpath查询？或者至少把它转换成DOMXPath？
<html>
...
<div id="content">
...
<div class="listing">
...
<div></div>
<div></div>
<div class='foo'>
<h3>Get me
浏览 3提问于2013-05-24得票数 26
回答已采纳
如何使用html Agility Pack获取Html页面上的所有divs。我正在尝试获取所有的I并将它们放入一个集合中。
<p>
<div class='myclass1'>
<div id='f'>
</div>
<div id="myclass2">
<div id="my"><div id="h"></div><div id
浏览 2提问于2012-07-18得票数 3
回答已采纳
是否可以使用PHP的DOMXPath (或类似的替代方案)从以下结构提取值bar，而不提取值foo？
<div>
<p><span>foo</span>bar</p>
</div>
到目前为止，我所有的尝试都从节点的后代以及节点本身返回内容，这不是我在本例中想要的。
浏览 6提问于2013-11-15得票数 2
回答已采纳
2回答
我想要在父元素中获得HTML。例如，我有这样的结构：
<div>
<div>text<b>more text</b>and <i>some more</i></div>
</div>
我想要得到text<b>more text</b>and <i>some more</i>作为结果。
下面是我的代码：
$dom = new DOMDocument();
$dom->loadhtml($html);
$xpath = new DOMXPath($d
浏览 3提问于2013-06-22得票数 0
回答已采纳
3回答
在PHP中获取当前节点的属性并根据该属性创建条件时遇到问题.
示例XML
<div class='parent'>
<div class='title'>A Title</div>
<div class='child'>some text</div>
<div class='child'>some text</div>
<div class='title'>A Title</div&
浏览 1提问于2014-06-27得票数 3
回答已采纳
我一直在用xpath表达式来查找特定类型的第n个深度后代。
分解的问题可以这样描述:查找深度为2的所有<section>、或 <article>元素，忽略路径中的任何其他元素。换句话说:深度只计算在section或article标记上。
<body>
<main>
<section>
<div>
<article>this is to be selected
<div>
<section></s
浏览 3提问于2017-02-18得票数 0
回答已采纳
2回答
我有一串“源html”和一串“替换html”。在“源html”中，我希望查找具有特定类的节点，并将其内容替换为“替换html”。我尝试过使用replaceChild方法，但这似乎需要我遍历一个级别(parentNode)。
这不管用
$dom = new DOMDocument;
$dom->loadXml($sourceHTML);
$replacement = $dom->createDocumentFragment();
$replacement->appendXML($replacementHTML);
$xpath = new DOMXPat
浏览 4提问于2014-03-08得票数 0
回答已采纳
我正在使用"@nesk/puphpeteer": "^2.0.0" ，希望从链接中获取文本和href-attribute。
我尝试了以下几种方法：
<?php
require_once '../vendor/autoload.php';
use Nesk\Puphpeteer\Puppeteer;
use Nesk\Rialto\Data\JsFunction;
$debug = true;
$puppeteer = new Puppeteer([
'read_timeout' => 100,
浏览 0提问于2021-08-09得票数 10
我正在尝试解析一个html文件。
其思想是使用title和desc类获取跨度，并在每个具有class='thebest‘属性的div中获取它们的信息。
下面是我的代码：
<?php
$example=<<<KFIR
<html>
<head>
<title>test</title>
</head>
<body>
<div class="a">moshe1
<div class="aa">haim</div>
</
浏览 5提问于2010-07-07得票数 6
回答已采纳
我正在尝试解析一些超文本标记语言，但有一些DOMXPath查询功能的问题。我希望我的代码找到所有带有类"container“的div，然后在每个div中找到带有类"name”的div。在上，我读到您可以为XPath查询函数指定上下文节点，以便仅在确定节点内进行搜索，但在我的示例中，它似乎没有任何作用。
这可能是因为$person是DOMElement类型的对象，而XPath查询接受DOMNode作为上下文节点。但据我所知，DOMElement扩展了DOMNode，所以这应该不是问题。此外，我没有收到任何错误或警告。
我使用的是PHP版本5.5.12。
这是我的代码：
<p
浏览 43提问于2018-06-10得票数 0
回答已采纳
2回答
木偶师找不到Xpath
、、、、
我试图进入网络抓取，我得到了我的手在一个网站，看起来很容易刮。然而，这个网站有许多具有相同ID的元素，这使得它很难使用选择器。
因此，我试图使用其完整的XPath获取一个元素。问题是，当我在网站上打开Chrome控制台并键入：
$x("/html/body/div[2]/div[4]/div/table[2]/tbody/tr/td[1]/div[1]/div[1]/table/tbody/tr[1]/td/table/tbody/tr[2]/td[2]")
有时起作用，有时不起作用。我注意到它起作用了，特别是在检查了元素之后。我在其他线程上发现，它可能与iframe相关，但铬
浏览 3提问于2019-12-21得票数 1
回答已采纳
1回答
这是我的代码：
$html_string = <<<STR
<p>paragraph<a>link</a></p>
<div class="myclass">
<div>something</div>
<div style="mystyle">something</div>
<b><a href="#">link</a></b>
<b&g
浏览 6提问于2017-01-29得票数 0
回答已采纳
我对HtmlAgilityPack的xpath表达式有一种奇怪的行为。我试图使用HtmlAgilityPack来提取声明为<div class='cont'>的div中的所有值，然而，当我使用下面的代码时，我只是获得了<div class='cont'>和<div class='button'>中的所有值。有人知道为什么会这样吗？下面是重现它的完整代码：
using System;
using System.Xml.XPath;
using HtmlAgilityPack;
namespace Console
浏览 1提问于2012-06-19得票数 0
2回答
我需要将子节点附加到其父节点，但是父节点应该是div。
如果父节点不是div，则需要检查父节点，在得到div节点之前检查父节点。该怎么做呢？
XML文件
<div class="parent">
<div class="boxed-text">box text1</div>
<li>
<div class="boxed-text">box text2</div>
<p>para</p>
浏览 1提问于2015-09-29得票数 3
回答已采纳
如何通过Domdocument PHP获取dom元素的第一级？
代码不起作用的示例-来自Q&A:
<?php
$str=<<< EOD
<div id="header">
</div>
<div id="content">
<div id="sidebar">
</div>
<div id="info">
</div>
</div>
<div id="foot
浏览 0提问于2011-05-04得票数 16
回答已采纳
我想从无序列表中选择一个特定颜色的项目。另一条帖子中的一张海报建议我尝试browser.find_by_xpath("/html/body/a[@data-style-name='COLOR HERE'"，但这行不通。XPath (取自)看起来如下：/html/body/div[2]/div/div[2]/ul/li[2]/a[1]。如何在Splinter中单击此选项？
浏览 2提问于2017-12-07得票数 1
回答已采纳
1回答
我想捕获td标记之间的所有内容，但除以它们的tr。这样我就可以得到一个数组，其中包含每个tr中的内容。
<div id="box">
<tr align='center'>
<td>1</td>
<td style='padding-left: 0px !important;padding-right: 10px !important;'> <div id=''></div></td>
<td>45</td>
浏览 1提问于2015-03-14得票数 0
回答已采纳
3回答
我正在尝试使用puppeteer搜索不区分大小写的内部文本。
我读过这个：
例如，我有这样的元素：
<div>
<span>Test One</span>
<span>Test Two</span>
<span>Test Three</span>
</div>
我已经尝试过了，但没有成功：
const element = await page.$x("//span//text()[contains(translate(., 'ABCDEFGHIJKLMNOPQRSTUVWXYZ
浏览 35提问于2019-03-28得票数 4
回答已采纳
使用带有以下代码的CasperJS 1.1，我可以从网页中获取有用的DOM。
casper.each(c.getElementsInfo(xpath), function(casper, element, j) {
var html = element["html"].trim();
if(html.indexOf('Phone') > -1) {
// what should I put here?
}
});
但是，我希望访问并获取元素的子元素。我怎样才能做到这一点？元素的HTML (a.k.a，html的值)如
浏览 0提问于2015-06-18得票数 0
回答已采纳
我想从标记中获取文本，但不想从嵌套标记中获取文本。也就是说，在下面的示例中，我只想从<small>标记中获取字符串183591，并从<span>标记中排除文本Service Request ID:。这并不简单，因为<span>标记嵌套在<small>标记中。使用WebDriver和XPath可以做到这一点吗？
标签中的文本每次都会改变。
<div id="claimInfoBox" style="background-color: transparent;">
<div class="co
浏览 3提问于2014-06-30得票数 2
2回答
使用DOMXPath::query是否有可能只获得一级深度的childNodes？
例如，如果我有一个这样的文档：
<div>
<span>
<cite>
</cite>
</span>
<span>
<cite>
</cite>
</span>
</div>
我希望NodeList只包含跨度而不包含cites。
还应该提到的是，它并不总是相同的元素(div、span等)。我需要它
浏览 2提问于2010-01-01得票数 4
2回答
我有以下结构，其中子节点是随机排列的：
<span id="outer">
<div style="color:blue">51</div>
<span class="main">Gill</span>$500
<span style="color:red">11</span>
<span></span>James
<div style="color:red&#
浏览 1提问于2016-06-23得票数 1
回答已采纳
4回答
我有一个类似于以下内容的xpath：
$path = '//*[@id="page-content"]/table/tbody/tr[3]/td['.$i.']/div/a';
其中$i从1到X。我要正常使用：
for($i=1; $i<X;$i++){
$path = '//*[@id="page-content"]/table/tbody/tr[3]/td['.$i.']/div/a';
$nodelist = $xpath->query($path);
$result
浏览 2提问于2012-11-09得票数 0
回答已采纳
也许有人可以帮助我使用type=“收音机”在某个块div中获取硒中的所有元素--例如：
我有divBlock = By.CssSelector("input[class='Vertical Radio']");
如何获取divBlock中的所有元素，如果divBlock中的元素具有type=“收音机”，请单击此元素？
浏览 0提问于2015-08-19得票数 0
回答已采纳
我正在尝试将存储在旧MS数据库中的富文本读入一个新的PHP web应用程序中。净化后的数据将使用CKEditor显示给用户，这对解析符合标准的HTML代码非常严格。然而，存储在MS中的数据通常格式不正确，或者使用不推荐的HTML代码。
下面是一个我试图净化的数据示例：
<div align="right">Previous claim $ 935.00<div align="right"> This claim $1,572.50</div><
浏览 2提问于2019-05-05得票数 0
回答已采纳
2回答
我很难找到一种方法来迭代puppeteer中给定节点的子节点。我事先不知道html的结构，只知道父元素的id。
var elemId = "myelemid";
const doc = await page._client.send('DOM.getDocument');
const node = await page._client.send('DOM.querySelector', {
nodeId: doc.root.nodeId,
selector: '#' + elemId
});
//node.chi
浏览 4提问于2018-12-10得票数 1
回答已采纳
我很难理解如何使用scrapy的xpath的一些细节。例如：
额外的html-身体填充-我没有添加
from scrapy.selector import Selector
t = '<a href="123">qwer</a>'
sel = Selector(text=t)
sel.extract()
# returns: <html><body><a href="123">qwer</a></body></html>
html-body标记从哪里
浏览 0提问于2018-10-06得票数 2
回答已采纳
我想从另一个网站打开一个页面，并提取此页面中的div of class="layout-2-2"中的所有链接(href)。如何使用PHP完成此操作？ 我想复制this网页布局-2-2中的每个链接。 以下是我的实际代码 $doc = file_get_contents('https://url/');
$xpath = new DOMXpath($doc);
$liens1= $xpath->query('//div[@class="layout-2-2"]');
$links = [];
浏览 78提问于2019-03-01得票数 3
回答已采纳
给定html：
<div class="class1">
<div class="class2">1 2 3</div>
<div class="class3">a b c</div>
</div>
由于我的html中有几个div元素，它使用了类"class1“，而且没有一个id，所以我希望通过其子元素的文本来查找/获取这个父元素。
我尝试了不同的变体，比如
By.xpath("//div[contains(@class, 'class
浏览 2提问于2017-05-19得票数 0
回答已采纳
我试图解析一个html页面，我会从这段代码中得到一对节点
<li class="classli">
<div class="element">element1</div>
<div class="description">description1</div>
</li>
<li class="classli">
<div class="element">element2&l
浏览 4提问于2016-03-03得票数 1
回答已采纳
我可以选择父div类和所有列表项，但尝试使用UPC编号捕获特定的类，并删除标签和内容。请注意，在".parent“类下的所有子类中都没有id或类。这是一个屏幕抓取，所以没有办法添加任何东西。另外，li的顺序可以改变，所以不需要倒计时。
希望只捕获...
000022200000
这是字符串/网页...
<div class="parent">
<ul>
<li>...</li>
<li><b>UPC:</b>000022200000</li>
浏览 0提问于2013-03-12得票数 0
回答已采纳
我的目标是能够在页面上找到我所跟踪的所有Instagram (post+comment)用户块的大小和位置。(下面页面的大矩形块，左边是图片，右边是注释)
这方面的一个例子如下：
click 在第一篇文章上
，，我试图在页面的中间设置注释块，这样我就可以在页面上找到页面的大小和位置。我看到的xpath是(//*[@id="react-root"]/section/main/div/div/article/div[1])，div类以_97aPb开头，但是，当我刷新或转到不同的用户时，这些更改就开始了。
所以，我在寻找另一种方法来找到这个元素。我希望能够点击到下一篇文章，
浏览 4提问于2020-04-01得票数 0
回答已采纳
我有一个基本的页面结构，元素(Span)嵌套在其他元素(div和span)下面。下面是一个例子：
html = "<html>
<body>
<div class="item">
<div class="profile">
<span class="itemize">
<div class="r12321">Plains</div>
<div class=
浏览 0提问于2016-12-09得票数 0
1回答
我尝试了各种方法，但都找不到解决方案。我想在php中使用xpath从html代码中检索元素。
例如：
<div class='student'>
<div class='name'>Michael</div>
<div class='age'>26</div>
</div>
<div class='student'>
<div class='name'>Joseph</div>
<div cla
浏览 0提问于2013-05-28得票数 0
回答已采纳
2回答
我有一个网页，我想通过代码修改(添加特定的单词链接)。
HTML代码：
<div class="section">
<h2>Notre histoire</h2>
<p style="text-align: justify;">SPECIFICS WORDS<strong>1998 : la création</strong></p>
<p style="text-align: justify;">pour objectif « de promouvo
浏览 2提问于2012-06-22得票数 4
3回答
我找到了一个具有特定类的对象：
THREAD = TREE.find_class('thread')[0]
现在，我想获得所有的<p>元素，它们都是它的直接子元素。
我累了：
THREAD.findall("p")
THREAD.xpath("//div[@class='thread']/p")
但是，所有这些都返回这个<div>中的所有<div>元素，不管<div>是否是它们最近的父元素。
我怎么才能让它起作用？
编辑：
示例html：
<div class='th
浏览 1提问于2018-01-31得票数 5
例如，我有如下所示的xml代码：
$xml=<<<XML
<?xml version="1.0"?>
<cars>
<desc1>
<h1>Title 1</h1>
<p>Content</p>
</desc1>
<desc2>
<h1>Title 1</h1>
<p>Content</p>
</desc2>
</c
浏览 5提问于2014-11-16得票数 1
回答已采纳
考虑到我有以下xml：
<div id="Main">
<div class="quote">
This is a quote and I don't want this text
</div>
<p>
This is content.
</p>
<p>
This is also content and I want both of them
</p>
</div&
浏览 3提问于2013-01-30得票数 0
回答已采纳
嘿，伙计们，这是绕不过去的。我有一个结构如下的html：
<div class="review-text">
<div id="reviewerprofile">
<div id="revimg"></div>
<div id="reviewr">marc</div>
<div id="revdate">2011-07-06</div>
</div>
this is an awesome review
&l
浏览 2提问于2011-07-21得票数 1
4回答
我正在用PHP和Xpath解析一个文档的几个不同的值。我将Xpath查询的结果/匹配抛到一个数组中。例如，我像这样构建了我的$prices array：
$prices = array();
$result = $xpath->query("//div[@class='the-price']");
foreach ($result as $object) {
$prices[] = $object->nodeValue; }
一旦构建了数组，我就循环遍历并将这些值抛到如下HTML中：
$i = 0;
foreach ($links as $link)
浏览 3提问于2012-07-16得票数 1
使用perl如何使用html元素的ID更改html元素的值。如何在代码中做到这一点。
例如：
<div id="container">
<form id="form" action="../code.cgi" method="post">
<label id="lblMessage" class="text">Message</label>
</for
浏览 0提问于2016-02-02得票数 0
使用Python Scrapy，我尝试获取一个网页中的内容，该网页的节点如下： <div id="title">Title</div>
<ul>
<li>
<span>blahblah</span>
<div>blahblah</div>
<p>CONTENT TO EXTRACT</p>
</li>
<li>
<span>blahblah</span>
&l
浏览 34提问于2019-12-26得票数 0
回答已采纳
我在这里的第一个帖子-这是一个伟大的网站，我一定会尽我最大的努力来回报，我可以。
我已经看到了以下问题的不同表现形式；然而，我试图解决的尝试似乎没有效果。
考虑一下这棵简单的树：
<root>
<div>
<p>hello</p>
<p>hello2</p>
<p><span class="bad">hello3</span></p>
</div>
</root>
我想出一
浏览 0提问于2010-09-09得票数 7
回答已采纳
我正在尝试从表单中提取所有输入元素。当我解析以下表单时：
<form>
<input name='test1' type='text'>
<input name='test2' type='text'>
<input name='test3' type='text'>
</form>
一切都很完美，HTML Agility Pack能够检测表单中的输入元素，但如果它有一个div父节点，如下所示，它将不会被检测到。
<form>
浏览 1提问于2012-03-27得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
