1回答
我正在尝试抓取网页和大篮子信息，但我在使用findAll()函数时遇到问题。当我使用len(imgList)时，长度总是返回0。它总是显示空的列表，如何解决它?有人能帮我吗？
浏览 8提问于2020-07-17得票数 0
回答已采纳
1回答
我正在尝试抓取web动态页面，但使用scrapy时，我不能检索所有信息，因为我想要的信息是动态的。 我试着使用Selenium，但与Scrapy不同的是，你不能指定头部，网站阻止了我。(我不能说出这个网站的名字，因为抓取是非法的，但它是一个著名的旅游元搜索引擎...)。我有一个带有验证码解算器的页面(用脚本很难解决重新验证码)，因为网站会检测到我是机器人。
浏览 23提问于2019-06-13得票数 0
我已经在漂亮汤的帮助下用python创建了一个web scraping项目，但我希望我的项目能作为桌面应用程序工作。因此，我可以运行该应用程序，并在特定的url上执行web抓取。有没有可能使用python和美汤，或者我必须用不同的语言制作这个项目？
浏览 0提问于2020-04-05得票数 0
我正在尝试通过网络抓取下面的网站"url='‘“。该网站包含8000多个数据。从这个页面，我需要像公司名称和链接，加入日期和追随者的信息。在此之前，我需要通过单击按钮对关注者列进行排序。请给我一个建议
这是我目前的代码，我没有添加html解析部分使用漂亮的汤。
浏览 0提问于2017-10-15得票数 1
1回答
我试图从这个网站上刮数据(价格+品牌)。代码实际上可以工作，但我只能在崇高的文本编辑器上看到数据，不能将其转换为CSV文件。此外，我还得到以下错误消息：这是我的代码：from bs4 import BeautifulSoup
de
浏览 7提问于2021-04-28得票数 1
回答已采纳
我正在尝试使用BS和Selenium抓取JavaScript enables页面。到目前为止，我有以下代码。它仍然不能以某种方式检测到JavaScript (并返回一个空值)。在这种情况下，我试图抓取底部的Facebook评论。(Inspect元素将类显示为postText)
谢谢你的帮助！
浏览 2提问于2013-01-26得票数 11
我用熊猫从网页上抓取一些冰球数据，如下所示：df_goal = pd.read_html(url_goal, index_col=0, header=0)[0]
这很好，但问题是切换到主页上的stats表的第二页并不会更改url，所以我不能使用相同
浏览 2提问于2014-11-25得票数 1
回答已采纳
1回答
在学习的时候，记住一个“目标”似乎是非常重要的，而我的目标之一就是成功地抓取和操作体育数据。我想从中抓取结果，但是看起来它是通过JS动态加载数据的：任何帮助都将是非常感谢的。
谢谢
浏览 1提问于2018-03-19得票数 0
回答已采纳
1回答
我对使用python的网页上的scrape数据比较陌生。我尝试使用beautiful soup来提取数据，并且取得了一定的成功。因此，我尝试在使用beautiful soup expand数据之前先对所有字段执行scraping操作。我现在有两个单独工作的代码部分，但无法将它们连接起来。我可以展开字段，我可以检索数据，但没有隐藏在“扩展下面”的内容，我想要完成的是展开字段，然后抓取相应页面的完整内容。
浏览 1提问于2021-02-24得票数 0
使用bs4解析html时，产品详细信息不可见。使用Selenium，我可以获得整个页面的字符串，并可以看到其中的价格(使用以下代码)。
浏览 0提问于2017-03-26得票数 3
1回答
我正在构建一个web抓取工具，它可以在符合条件后在HTML单元格中打开一个URL。任何帮助都是有用的。谢谢!到目前为止，我还在用硒和美丽的汤来构建脚本。这是我如何构建我的项目的快照。
浏览 2提问于2017-10-22得票数 1
1回答
因此，对于一些背景知识，我一直在尝试学习网络抓取，以便为涉及CNN的机器学习项目获取一些图像。我一直试图从站点上抓取一些图像(HTML代码在左侧，我的代码在右侧)，但没有成功；我的代码最终打印/返回了一个空列表。我是不是做错了什么？
浏览 17提问于2019-04-22得票数 1
回答已采纳
3回答
信息肯定在那里(我打印了汤以检查)，所以我不知道为什么前30 react-contextmenu-wrapper之后的所有东西都丢失了。
浏览 6提问于2019-10-05得票数 1
回答已采纳
但是我需要使用Node.js和一些软件包来下载网站。有一个本机节点请求方法- http.request和一个本机节点获取方法- http.get。
浏览 0提问于2019-06-02得票数 0
2回答
如何使用硒和美汤点击元素？
、、、、
如何在python中使用selenium和漂亮的汤点击一个元素？我得到了这些代码，我发现它很难实现。我想在每次迭代中单击每个元素。没有分页或下一页。我想在每个楼层平面图部分中抓取细节和图像，但这很困难，因为图像只在您单击特定元素后出现。除了图像本身，我只能获取详细信息。你自己试试吧，这样你就明白我的意思了。我在这里也使用了selenium。有没有像这样选择一个漂亮的picture = d.find('span',{'class':'Tappable-inactive
浏览 2提问于2019-11-13得票数 0
5回答
LinkedIn网络抓取
、、、
我想获取某一公司所有员工的数据，您可以使用在现场手动操作，但是通过API是不可能的。
如果import.io是识别LinkedIn分页，那么它将是完美的(参见页面末尾)。是否有人知道适用于LinkedIn站点当前格式的任何web抓取工具或技术，或者如何弯曲API以进行更灵活的分析？最好是基于R或网络，但肯定对其他方法开放。
浏览 0提问于2015-05-13得票数 11
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
