事情是这样的。我想要抓取257页的数据。我写了一个简单的代码，里面用selenium打开网站，抓取必要的首页文字。一切都很好，创建了我需要的数据帧，一切都很好。field_listingtype
print('moving to next page') 我找不到用于selenium的
浏览 16提问于2021-05-06得票数 1
我正在尝试学习如何使用Selenium自动化web流程，并希望能够构建健壮的web抓取器和其他东西。我的代码如下(当然是用Python编写的)
driver，我试着阅读了这个问题的过去的变体，
浏览 31提问于2021-05-18得票数 0
回答已采纳
所以我在Python中使用Selenium进行一些web抓取，我遇到了一个问题。我正在单击下一步按钮以移动到某个网站的下一页，但当我到达最后一页时，我需要停止单击它。现在，我的想法是在try/except语句中使用some_element.click()，等到按钮不可点击时出现错误。但是，.click()似乎不会发出任何类型的信号，当按钮不能被单击时，它不会抛出错误，也不
浏览 0提问于2015-06-08得票数 4
回答已采纳
我正在尝试使用python - selenium和bs4从雅虎搜索中获得搜索结果。我已经能够成功地获得链接，但我无法单击底部的按钮转到下一页。我尝试了一种方法，但在第二页之后无法识别。p=stack+overflow&fr=sfp&iscqry=&fr2=sb-top-search 这就是我所做的从页面获取数据，但需要放入一个改变页面的循环中： page = BeautifulSoup(driver.page_source, 'lxml
浏览 32提问于2021-06-24得票数 0
回答已采纳
1回答
我正在尝试使用Selenium移动到google搜索结果的下一页，这可以通过手动单击浏览器中的Next来实现。('https://www.google.com')inputElement.send_keys('python
浏览 2提问于2015-06-25得票数 1
我正在开发一款GUI桌面应用程序，让用户可以控制web抓取器。我有两个可执行文件，一个运行Selenium scraper (Py27)，另一个运行图形用户界面，它使用subprocess.Popen (Python38)启动和停止scraper。不幸的是，在两个应用程序中使用相同的Python版本现在对我来说是不可能的。尽管我们似乎没有因为Python版本差异而遇到环境问题。我可以毫无问题
浏览 40提问于2020-06-12得票数 0
我希望这是一个非常简单的问题:有没有人知道可以有效地抓取使用Microsoft Matrix构建的站点的工具？我可以用python编写代码，但这会花费我很长的时间来完成这项任务，这是因为Matrix生成的HTML非常糟糕和丑陋。我试过Web Harvey、Helium Scraper，也试过Chrome的Web Scraper插件。WebHarvey在超文本标记语言上卡住了，无法加
浏览 0提问于2015-07-20得票数 2
我正在做一个网络抓取项目，我试图爬行通过数百页的搜索结果，并将每个页面上显示的100个链接的ID存储到一个列表中。我已经存储了第一页的链接I，但我正在寻找一种有效的方式来移动到下一页，存储I，移动到下一页，存储I等。我已附加我的当前代码存储在第一页上的I，以及搜索结果的页面导航网站的代码截图。
浏览 0提问于2021-02-04得票数 0
我正在使用selenium和python抓取页面。数据已分页，表数据如下所示。<td></td>
现在的挑战是让selenium单击这个链接并前进到下一页有一个SO 试图解决这个问题，但它不是
浏览 0提问于2018-09-19得票数 1
7回答
我仍然在学习，并回答我的一个问题：，有人告诉我，这可能是因为没有考虑到问题的因素。我查看了文档，因此，下面是最相关的答案：WebElement element = driver.findElementActions(driver);## actions.click();
actions
浏览 6提问于2017-01-19得票数 109
回答已采纳
嗨，我刚开始使用web抓取，一直在尝试用Selenium在python中刮。当我通过部分链接找到next按钮时，自动单击将继续到下一个线程，例如页面1->页面2->下一个线程的页面1->下一个线程的页面2。EC.presence_of_element_located((By.PARTI
浏览 4提问于2018-05-25得票数 1
回答已采纳
我有这样的场景，有5个页面具有相同的URL，每个页面都有输入HTML元素。假设URL是https://abcnyweb.com/pages。导航的问题是所有的页面都共享这个唯一的URL，所以如果我想要移动到第五个页面而不是第一个页面，这是不可能的。我必须从第一个表格开始重新填写表格。有从上一页到下一页的按钮，并且每页中有超过15个要填充的元素。如果我没
浏览 44提问于2020-08-28得票数 0
1回答
如何管理铬本地存储
、、、
我正在使用Selenium + Python + ChromeDriver测试web应用程序。Web应用程序包含具有可以使用各种嵌入式筛选器排序的数据的表。问题在于，在第一次测试执行后，应用程序在浏览器本地存储中保存当前状态(比如打开哪个表页，应用了哪种数据排序方法)，因此当下一个测试开始时，数据已经被过滤.但是我需要每个测试的默认数据过滤器，所以我需要在每个测试用例之前设置默认的我找到了这个解决方
浏览 2提问于2016-06-22得票数 1
回答已采纳
我使用selenium来抓取twitter (而不是使用api的实践selenium)，当它到达下一页时需要登录，使用下面的代码定位登录输入字段，然后发送用户名和密码字符串：from selenium.webdriver.common.keys import Keys
driver = webdriver.Chrome(executable_pathdriver.execute_script("wi
浏览 3提问于2016-07-03得票数 1
回答已采纳
我需要建立一个Python刮板，从一个网站的内容只显示后，用户点击与Javascript onclick函数绑定的链接，页面不会被重新加载的数据。为了做到这一点，我研究了Selenium，并尝试了一下，似乎每次我实例化一个驱动程序时，Selenium都会打开一个新的Firefox web浏览器：这个开放的浏览器是必需的吗，或者有没
浏览 1提问于2013-03-03得票数 1
我需要在python代码中得到帮助，这样我就可以使用Sony selenium webdriver在图像上单击事件。我是selenium web驱动程序和python的新手。图像，下一页将显示登录详细信息。</span> import os from
浏览 1提问于2018-05-03得票数 1
回答已采纳
3回答
目前，我有一个web应用程序，当我给一个会计号码/帐单号码将得到所有的会计细节在下一页。以下是步骤：-2.Plug into the web application in a acct number text box.
4. It
浏览 7提问于2016-02-02得票数 0
回答已采纳
2回答
在尝试使用Selenium/Python测试web应用程序时，我遇到了一个问题。基本上我不能测试弹出窗口的元素。我可以在下一页测试元素。例如，单击一个按钮，将我带到下一页，我可以使用' next‘页面
浏览 1提问于2012-05-14得票数 5
我试图使用以下代码向下滚动到页面的元素：from selenium import webdriverdriver.get(url)
浏览 24提问于2022-07-04得票数 -1
回答已采纳
因此，我正在尝试使用Selenium (Python)浏览药房网站。这个网站提供了数千种药品和保健产品的目录。我试着做一个“横向”的网络抓取，提取每一个产品在目录的每一页的链接(此刻，我可以这样做)。分页中的前面的按钮如下所示：HTML还有下一条路径：我想
浏览 7提问于2022-02-02得票数 0
云服务器
ICP备案
对象存储
云直播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号