我正在尝试从通常包含多个页面的网页中提取特定数据。虽然我能够在第一页打印出我需要的所有信息，但我不能在其他页面上这样做。我在互联网上搜索解决方案，发现大多数解决方案都是通过连接一个链接页面和一个数字来遍历每个页面的。 然而，我在一个网站上工作，在这个网站上，当你导航到不同的页面时，链接页面不会改变。因此，我很难确定是哪个属性导致URL重定向到第二个页面，因为没有显示可点击的链接。当我检查外观类似的next按钮
浏览 37提问于2021-07-03得票数 0
回答已采纳
1回答
我是蟒蛇和网络抓取的新手。
我试图从这个链接中提取关于临床诊断测试的测试成分的信息。单击每个名称将带您到另一个页面，其中包含有关单个测试组件的详细信息。我想从这一页中提取出有共同问题的部分。
浏览 1提问于2018-01-19得票数 0
1回答
我想从网站上抓取数据。这个表扩展到多个页面上，但是url没有像page=3这样的东西，所以我不能遍历各个页面来获取数据。
有没有其他方法可以像这样抓取数据，而不会在不同的页面上循环？如何从python访问不同的页面来抓取数据？
浏览 19提问于2018-03-04得票数 0
但是，搜索结果并不在单个页面上。相反，它们分布在多个页面上，所以我想把它们都买下来。我想让我的脚本能够检查是否有下一个结果页面，并在那里运行自己。但是，如果我放入一个超出结果范围的页码，页面总是存在的，它只是没有任何结果，但有一个页面说没有结果可显示。然而，我注意到的是，每个页面结果都有一个id为'NextLink1‘的'Next’链接，而最后一个页面结果没有这个链接。所以我认为这就是魔力所在。但是我不知道如何以及在哪里实现这个检查
浏览 1提问于2016-07-16得票数 0
3回答
我正在抓取一个有多个页面的网页。我非常感谢您对我以下问题的帮助：
我已经围绕网页的URL构建了一个循环。但是，在HTML代码中查找标记时，只显示第一页中的信息。看起来循环并没有真正流过。
浏览 1提问于2016-06-07得票数 0
1回答
我正在使用R中的rvest包，我想从一个只包含大约40%的总信息的表中抓取一些数据。我关注了HTML，但它没有指定当不同页面的地址没有差异时如何抓取数据。我正在尝试从获取一些工作列表数据。read_html( )
html_node('table') %>%当多个页面的数据的HTML地址没有不同时，是否可
浏览 2提问于2018-06-20得票数 0
1回答
我正在创建一个使用php简单html dom库的网络抓取器。我正在做一个web scraping项目，在一个php页面上，我加载一个html页面用于抓取，在这个项目中，我调用另一个php页面上的函数，该函数也加载一个或多个html页面。问题是我无法加载第二个html页面。下面是我在两个页面上使用的函数，用于加载要抓取的html页面。html->load_fi
浏览 2提问于2011-09-21得票数 0
2回答
我正在尝试解析IDMb上的多个页面。解析器停留在从一个页面收集信息。我已经尝试了许多论坛来解决这个问题，但都没有效果。我怀疑这与没有正确设置我的嵌入式循环或我的初始请求有关。请帮帮忙。谢谢。此脚本的问题:在一个页面上循环。
浏览 2提问于2017-11-29得票数 0
1回答
我正在用Ruby编写一个web抓取脚本，它打开一个二手车网站，搜索汽车的品牌/型号，遍历结果页面，然后抓取每个页面上的数据。我遇到的问题是，我不一定知道开始时页面的最大数量，只有当我迭代到最后几个已知页面时，分页才会增加并显示更多页面。我已经将cleanpages定义为一个数组，并在第一次打开站点时用我知道的可用页面填充它。然后我使用cleanpages
浏览 0提问于2019-11-09得票数 1
2回答
我正在尝试使用R代码从以下网站中抓取前4页用于教育目的：
library(rvest)library(tidyverse)
url_base <- "https
浏览 28提问于2020-05-27得票数 2
回答已采纳
目前，我使用scrapy抓取一个网页的多个页面，并将数据导出到CSV文件。每天，爬行器都会遍历页面并保存数据；但是，它会覆盖前几天的数据。通过这种方式，我可以将以前抓取的所有数据保存在一个位置。
浏览 0提问于2012-07-20得票数 0
我正在使用这段代码通过HTMLAgility抓取HTML页面。但是在抓取页面时，我无法将相对url转换为absoute url。我正在使用以下代码：data = doc.DocumentNode.SelectSingleNode("//div[@id='columnRight']&quo
浏览 0提问于2018-05-07得票数 0
回答已采纳
1回答
candidates= ".precinct-results-databox1 h1"当我最初尝试刮网站数据时，
浏览 3提问于2021-05-23得票数 0
这样做的目的不是隐藏元素，而是避免与加载CAPTCHA相关的网络延迟，后者是页面本身的10倍。
如果这是必要的解决方案，我很乐意使用selenium-wire来拦截请求。
浏览 5提问于2021-07-21得票数 0
2回答
我是python抓取的新手，我试图获取加拿大不同winmar位置的地址，并将结果放入csv文件中。到目前为止，我发现区分不同地点站点的唯一方法是在地址(数字)的末尾加上代码。问题是，结果不会随着程序的运行而改变，而是在打印到csv文件时产生第一个位置(305)的结果。感谢您的时间和关心！
浏览 0提问于2020-04-12得票数 3
回答已采纳
2回答
我想从多个网站抓取类似的网址，如，和。 print("mobile: " + mobile)
有没有一种方法可以让我简单地列出url的不同部分(woollahra，唐人街，邦迪比奇)，这样脚本就会使用我已经写好的代码循环遍历每个网页
浏览 17提问于2017-08-04得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
