腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
python
中
的
Selenium
web
抓取
无法
读取
元素
的
.
text
、
、
、
、
我正在尝试删除来自verizon网站
的
评论,我通过在网页上做inspect找到了评论
的
xpath。我正在执行下面的代码,但是这个review.
text
似乎并不总是能完美地工作。我有时会得到正确
的
文本,有时它只是打印Error in消息-from
selenium
import webdriver # Print reviews ===&
浏览 4
提问于2017-02-23
得票数 2
回答已采纳
1
回答
抓取
问题:“检查
元素
”与“查看页面源”不同
、
、
、
、
当我单击所需
的
选项卡,在显示其内容后,首先会出现两个问题。1-网页地址不改变,对所有标签都是相同
的
。2-当我看到带有浏览器(firefox和chrome)
的
“查看页面源”
的
页面源时,所有选项卡
的
页面源看起来也是相同
的
,而当我对其中一个选项卡使用“检查Elemnt”时,我看到我
的
目标内容以html形式显示
的
代码问题是,我
无法
通过
python
访问所需选项卡
的
内容,这是
web
世界
浏览 2
提问于2020-02-06
得票数 4
回答已采纳
4
回答
我想从什么应用程序
中
抓取
所有的
元素
,但是我对
selenium
python
有问题
、
、
我想从什么应用程序
中
抓取
所有的
元素
,但是我对
selenium
python
有问题,这是我
的
代码:from
selenium
.webdriver.commonimport keysdriver.get("https:
浏览 3
提问于2021-10-01
得票数 1
回答已采纳
2
回答
BeautifulSoup
web
抓取
,无结果
、
、
我在试着从https://hk.appledaily.com/search/apple..。我需要从div class="flex-feature"但它只返回[]..。希望大家能帮忙,谢谢! from bs4 import BeautifulSoup results = soup.find_all(
浏览 40
提问于2020-10-06
得票数 2
回答已采纳
2
回答
无法
读取
null (
读取
'ShadowRoot') - Java和
Selenium
的
属性
、
、
、
我正在尝试使用Java和
Selenium
进行
web
抓取
,但是对于我需要进行
web
抓取
的
一部分,它要求我访问一个影子DOM
元素
。我正在使用Javascript来访问它,并且我正在输入检索我正在寻找
的
内容所需
的
querySelector片段,但是我得到了一个“
无法
读取
null属性(
读取
'ShadowRoot')”错误。下面是我
的
代码片段: Str
浏览 15
提问于2021-12-06
得票数 0
1
回答
使用
Selenium
和Java从网站
中
抓取
数据
、
我试图刮数据从板球网站,并已经写了一个方法,接受一个球员
的
名字,并显示他们
的
相应数据。{ WebElement player = driver.findElement(By.xpath("//a[contains(
text
player_name = player.get
浏览 0
提问于2020-03-04
得票数 0
2
回答
Selenium
.common.exceptions.NoSuchElementException错误即使有显式等待
、
、
我目前正在尝试从subreddit
中
抓取
数据(我使用
的
是旧
的
reddit ->扩展名,它以这种方式恢复了reddit
的
旧外观,这样更容易
抓取
),但是每当我试图获得结果时,我都会从这段代码
中
得到错误: xpath:消息:没有这样
的
元素
:
无法
定位
元素
:{“方法”:“xpath”,“选择器”:“//a@class=‘title可能-空白loggedin '"}
浏览 0
提问于2021-02-06
得票数 0
回答已采纳
4
回答
Selenium
Webdriver
的
替代方案
、
、
我使用C#和
Python
的
Selenium
Webdriver从网站获取数据
元素
,但
web
抓取
的
速度非常慢。
抓取
35000个数据表花了我大约1.5天
的
时间。使用
Selenium
Webdriver,我可以执行Javascript来获取Java
元素
。有没有一些库可以不需要像Webdriver这样
的
东西来在网页上执行Javascript来检索
元素
,并且能够点击
浏览 5
提问于2015-04-16
得票数 13
1
回答
避免在
Selenium
中
获取某些
元素
,比如定制
的
广告阻止程序。
、
有办法避免在
selenium
中加载某些
元素
吗?例如,由XPATH表达式定义
的
?如果这是必要
的
解决方案,我很乐意使用
selenium
-wire来拦截请求。
浏览 5
提问于2021-07-21
得票数 0
2
回答
Python
-哪一种被认为更适合
抓取
:硒还是含硒
的
漂亮汤?
、
、
、
、
这个问题适用于
Python
3.6.3、bs4和Win10上
的
Selenium
3.8。 我正在尝试用动态内容刮页。我试图刮
的
是数字和文本(例如来自 )。根据我
的
理解,使用requests+beautifulsoup不会完成这项工作,因为动态内容将被隐藏。因此,我必须使用其他工具,如
selenium
webdriver。然后,考虑到我无论如何都要使用
selenium
,您是否建议忽略漂亮
的
汤,继续使用
selenium
函数呢?elem = d
浏览 6
提问于2017-12-26
得票数 2
回答已采纳
1
回答
如何使用
python
从网站上检索值
、
我想知道有没有什么方法可以制作一个
python
脚本来从网站上获取一个所说
的
值,在我
的
例子
中
是一个离线数字,它在一个每5分钟刷新一次
的
网站上。我想要设置它,如果该值增加,它将发送给我一封电子邮件。我之所以想这么做,是因为我在一家拥有超过15,000名矿工
的
比特币开采设施工作,我们必须不断地监控他们。但是,在做诸如清洁之类
的
日常工作时,携带笔记本电脑是非常令人恼火和恼人
的
。我对
python
知之甚少,所以如果有人能给我指出正确
的</
浏览 3
提问于2020-10-01
得票数 0
2
回答
在amazon lambda
python
中
运行
selenium
webdriver
、
、
、
、
我想在amazon lambda
中
运行BeautifulSoup和
selenium
webdriver,我
的
运行环境是
python
3.6。可以运行吗?如果是这样的话是怎么做
的
。我
的
意图是使用漂亮
的
Soup4和
selenium
从网页
中
删除数据(因为它必须删除由javascript动态生成
的
数据)。
浏览 4
提问于2018-04-21
得票数 14
回答已采纳
1
回答
如何在
中
设置Try/除超时以查找
元素
?
、
我正在使用
Python
来
抓取
几个
web
页面,而且我以前知道有些页面没有所有的
元素
。 xyz = driver.find_element_by_css_selector('div.xyz').
text
except NoSuchElementException:如何设置较小
的
超时(例如5秒),使
Selenium
在运行异
浏览 1
提问于2019-08-29
得票数 6
回答已采纳
1
回答
使用
Python
PyQt对Javascript内容进行网页
抓取
、
、
、
我现在正在执行一项任务,系统地从似乎是由javascript呈现
的
课程列表
中
抓取
内容。我在
web
上使用PyQt4遵循了一些脚本,但失败了(我在下面复制了它)。更准确地说,这个脚本在一些网站上使用javascript,它通过点击特定
的
链接来加载内容。然而,下面的网站(ouhk,我在下面的脚本
中
复制
的
链接)似乎没有指向特定内容
的
链接,即节目信息、节目结构和费用等。相反,它使用标签容器和FTP来存储和加载信息(我从其源代码中找到)。我想知道是否有任何方法可以
浏览 17
提问于2016-09-21
得票数 3
1
回答
Python
抓取
-如何定位映射
元素
的
坐标?
、
、
我正在用
python
做一些
web
抓取
和使用
selenium
。我
无法
定位地图
元素
并从中获取纬度和经度。有人能看看密码吗。这是我
的
密码from
selenium
.webdriver.common.keys import Keysmaps.click() laltong=driver.find_element_by_x
浏览 1
提问于2016-11-15
得票数 0
回答已采纳
2
回答
查找用于单击和查找文本
的
xpath
、
、
NoSuchElementException:错误:
无法
定位
元素
:{“”:“xpath”,“选择器”:“//td@class=‘C($primaryColor)W(51%)’}”(会话信息: chrome=77.0.3865.120) from
selenium
import webdriver from
selenium
.webdriver.common.keys import Keysdriver = webdriver.Chrome('/U
浏览 6
提问于2019-10-17
得票数 0
回答已采纳
2
回答
在使用
python
的
selenium
中使用xpath获取innerHTML
、
、
、
、
我正在尝试学习
web
抓取
,尽管我检查了文档
中
的
示例和堆栈
中
的
一些问题,但我
无法
使我
的
代码工作。使用F
浏览 7
提问于2020-05-19
得票数 0
2
回答
使用
Python
和
Selenium
将鼠标悬停在图上
、
、
我正在尝试使用
Python
和
Selenium
从中
抓取
数据。困难
的
部分是,只有当将鼠标悬停在折线图上
的
点上时,数据才会出现。目前,我
的
问题是
无法
创建所有悬停在对象上
的
列表。到目前为止我
的
代码如下:from
selenium
.webdriver.common.action_chains import以前,我在
浏览 0
提问于2018-01-10
得票数 3
4
回答
如何在
Python
中使用
Selenium
WebDriver获取文本
、
我正在尝试使用
Selenium
WebDriver获取文本,下面是我
的
代码。请注意,我不想使用XPath,因为在我
的
情况下,ID在每次重新启动网页时都会更改。我
的
代码:HTML: <span class="current-
text
" id="
浏览 63
提问于2014-01-08
得票数 111
回答已采纳
1
回答
用Laravel和
Selenium
进行
Web
抓取
、
、
、
我目前正在使用
Python
进行
web
抓取
。我使用了
Selenium
和Beautifulsoup库来
抓取
。我最近知道
Selenium
适用于php/Laravel。我
的
问题是,我可以使用Laravel +
Selenium
web
驱动程序
抓取
web
吗?如果是,你能给我提供一些链接或存储库,以便我学习吗?我被迫在我
的
抓取
工作中使用php/Larave
浏览 19
提问于2019-11-19
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
python基础教程:8种selenium元素定位的实现
基于Selenium+Python的web自动化框架
使用多个Python库开发网页爬虫(二)
Python系列教程(6)-利用 selenium 自动化网页操作
python如何使用Selenium获取弹出框架中的内容
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券