Loading [MathJax]/jax/input/TeX/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >练习爬虫,我想问一下这个xpath语句为啥找不到元素,感谢大佬!

练习爬虫,我想问一下这个xpath语句为啥找不到元素,感谢大佬!

作者头像
Python进阶者
发布于 2022-11-14 07:20:28
发布于 2022-11-14 07:20:28
4510
举报

北阙休上书,南山归敝庐。

大家好,我是皮皮。

一、前言

前几天在Python钻石交流群【萤火】问了一个Python网络爬虫的问题,下图是截图:

下图是报错截图:

二、实现过程

这里【error】给了一个代码,如下所示,满足粉丝的需求:

用selenium没找到的话,大概率是网页还没渲染出来,代码就运行到了抓取规则,所以抓不到。

其实他的匹配规则是可以拿到数据的,只不过用jupyter运行selenium的时候容易出问题,也不推荐。

起码用其他的编译器来看,应该都可以实现的!

三、总结

大家好,我是皮皮。这篇文章主要盘点了一个Python网络爬虫的问题,文中针对该问题给出了具体的解析和代码实现,帮助粉丝顺利解决了问题。

最后感谢粉丝【萤火】提问,感谢【此类生物】、【瑜亮老师】、【error】给出的思路和代码解析,感谢【冫马讠成】、【猫药师Kelly】、【dcpeng】等人参与学习交流。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2022-09-14,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 Python爬虫与数据挖掘 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
盘点Python网络爬虫过程中xpath的联合查询定位一个案例
前几天在Python钻石交流群【髙鵬】问了一个Python网络爬虫的问题,提问截图如下:
Python进阶者
2022/11/14
4220
盘点Python网络爬虫过程中xpath的联合查询定位一个案例
盘点一个Python网络爬虫实战问题
前几天在Python铂金交流群【红色基因代代传】问了一个Python网络爬虫的问题,提问截图如下:
Python进阶者
2022/11/14
1840
盘点一个Python网络爬虫实战问题
anaconda虚拟环境下pip报这个错咋回事啊?
前几天在Python白银交流群【喜靓仔】问了一个Python库安装的问题,提问截图如下:
Python进阶者
2022/11/14
2330
anaconda虚拟环境下pip报这个错咋回事啊?
兄弟们,这样的数据如何删除所有的周末仅保留工作日呢?
前几天在Python黄金交流群【叫我東航(Demon.)】问了一个Excel处理的问题,提问截图如下:
前端皮皮
2024/04/18
1580
兄弟们,这样的数据如何删除所有的周末仅保留工作日呢?
将这个相关系数的矩阵变成一一对应关系,怎么破?
前几天在Python交流白银群【Ming】问了一道Pandas数据处理的问题,如下图所示。
前端皮皮
2022/08/17
3470
将这个相关系数的矩阵变成一一对应关系,怎么破?
Python网络爬虫过程中这个selenium对应的火狐驱动怎么用不了?
前几天在Python最强王者交流群【孤独】问了一个Python网络爬虫处理的问题,提问截图如下:
前端皮皮
2024/04/18
1250
Python网络爬虫过程中这个selenium对应的火狐驱动怎么用不了?
取出df3["text"]里 tblActors字段的内容,如果没有就填充一个值,怎么破?
前几天在Python最强王者交流群【WYM】问了一个Pandas处理的问题,提问截图如下:
Python进阶者
2022/11/14
7160
取出df3["text"]里 tblActors字段的内容,如果没有就填充一个值,怎么破?
麻烦问一下算出来后怎么写成一个csv并有标题?
前几天在Python铂金交流群【红色基因代代传】问了一个Pandas处理的问题,提问截图如下:
Python进阶者
2022/11/14
1710
麻烦问一下算出来后怎么写成一个csv并有标题?
盘点一个Python列表处理的基础问题
前几天在Python最强王者交流群【༺ཉི།།与歌同行ཉྀ༻】问了一个Python列表的处理问题,提问截图如下:
Python进阶者
2022/11/14
3560
盘点一个Python列表处理的基础问题
盘点一道使用Python编程来实现高斯计算的基础算术题目
前几天在Python钻石交流群有个叫【dcpeng】的粉丝问了一个关于Python基础的问题,这里拿出来给大家分享下,一起学习。
Python进阶者
2022/03/10
5200
盘点一道使用Python编程来实现高斯计算的基础算术题目
想获取JS加载网页的源网页的源码,不想获取JS加载后的数据
前几天在Python钻石交流群【梦】问了一个Python网络爬虫的问题,这个网站不知道使用了什么反爬手段,都获取不到页面数据。原来的那篇文章竟然爆文了,突破了1.5w的阅读量,欢迎大家围观。
前端皮皮
2024/04/12
7030
想获取JS加载网页的源网页的源码,不想获取JS加载后的数据
如何读取保存一些list信息的txt,生成有一组名字有规律的list
前几天在Python白银交流群有个叫【大侠】的粉丝问了一个Python列表处理的问题,这里拿出来给大家分享下,一起学习下。
前端皮皮
2022/08/17
5810
如何读取保存一些list信息的txt,生成有一组名字有规律的list
我想提取这个发震时刻的年份、月份、小时,怎么破?
前几天在Python钻石交流群【萤火】问了一个Pandas处理的问题,这里拿出来给大家分享下。
Python进阶者
2024/05/28
1660
我想提取这个发震时刻的年份、月份、小时,怎么破?
该字段对应的内容看上去是个列表字典嵌套,实际上是个str,这个字段怎么只取出name对应的内容呢?
前几天在Python最强王者交流群【WYM】问了一个Pandas处理的问题,提问截图如下:
Python进阶者
2022/11/14
4330
该字段对应的内容看上去是个列表字典嵌套,实际上是个str,这个字段怎么只取出name对应的内容呢?
手把手教你抓取链家二手房首页的全部数据
这里他是使用Scrapy框架抓取的,上面的代码是爬虫文件中的所有代码,速度非常快,可以轻而易举的把数据获取到。
前端皮皮
2022/08/17
6010
手把手教你抓取链家二手房首页的全部数据
盘点一个Python中列表合并的问题
前几天在Python钻石交流群【海南菜同学】问了一个Python列表合并的问题,提问截图如下:
Python进阶者
2022/11/14
1.1K0
盘点一个Python中列表合并的问题
盘点一个Python中字符串替换的问题
前几天在Python白银交流群【凡人不烦人】问了一道Python字符串替换的题目,如下图所示。
前端皮皮
2022/08/17
1.6K0
盘点一个Python中字符串替换的问题
分享一个使用Python网络爬虫抓取百度tieba标题和正文图片(xpath篇)
前几天在Python钻石交流群有个叫【嗨!罗~】的粉丝问了一道关于百度贴吧标题和正文图片网络爬虫的问题,获取源码之后,发现使用xpath匹配拿不到东西,从响应来看,确实是可以看得到源码的。上一篇文章我们使用了正则表达式获取到了目标数据,这篇文章,我们使用xpath来进行实现。
前端皮皮
2022/08/17
8230
分享一个使用Python网络爬虫抓取百度tieba标题和正文图片(xpath篇)
盘点一道基础的Python题目
前几天在Python白银交流群【Flipped】问了一道Python基础问题,如下图所示。
前端皮皮
2022/08/17
2320
盘点一道基础的Python题目
盘点一个Python网络爬虫过程中中文乱码的问题
前几天在Python白银交流群【空翼】问了一个Python网络爬虫中文乱码的问题,提问截图如下:
Python进阶者
2022/11/14
4000
盘点一个Python网络爬虫过程中中文乱码的问题
推荐阅读
相关推荐
盘点Python网络爬虫过程中xpath的联合查询定位一个案例
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档