下面是我从亚马逊抓取产品链接的代码，但得到了错误。我试图从多个页面抓取链接的代码是很好的，3页后，给出了下面提到的错误。
浏览 19提问于2020-10-14得票数 0
1回答
我需要帮助来找到我的基于scrapy/python的刮刀的瓶颈。
我们正在从亚马逊(目前是意大利)获取产品，但我们正在与总体请求吞吐量作斗争。我们使用的是backconnect旋转代理: StormProxies (50个线程计划)+ Proxyrotator (100个线程)+ TOR，但即使是250+可用线程，我们每秒也只能抓取1/2个URL……我们在OVH
浏览 0提问于2019-09-05得票数 0
3回答
没有从网页上获得所有链接
、、、
我正在做一个网络抓取项目。我正在抓取的网站的网址是
我是刮所有的产品在这个网页上列出的链接。我尝试使用请求-HTML和Selenium获得链接。但我得到了57个和24个链接。而页面上则列出了150多个产品。下面</
浏览 3提问于2021-01-30得票数 0
回答已采纳
我正在尝试抓取显示特定产品的供应商和价格的产品列表页面，但urllib.urlopen不起作用--它可以在亚马逊上的所有其他页面上工作，但我想知道亚马逊的机器人是否能阻止抓取产品列表页面。使用Chrome我仍然可以查看页面源代码...
下面是一个我想要<em
浏览 0提问于2013-02-13得票数 1
回答已采纳
2回答
如何使用亚马逊产品广告API在我的iPhone应用程序中显示产品？
用户可以通过iPhone购买产品吗?或者他们可以
浏览 0提问于2012-11-24得票数 4
回答已采纳
1回答
我正在尝试使用和服刮亚马逊的结果页。例如，我在Amazon.co.uk搜索引擎上输入"Sony“，想要抓取结果以获得产品名称。我能够做到这一点为一个页面，但我想刮多页使用分页功能。到目前为止，我还不能让分页工作。我选择“下一页”作为分页的链接，但是我得到了一
浏览 1提问于2015-11-30得票数 0
我试着做了一个selenium应用程序，它从一个网站上抓取产品名称和价格，然后把它作为一个网络钩子发送给discord。我得到的错误是在标题中。/*[@id="details"]/h1""") embed.add_field(name='Product:', value=st
浏览 24提问于2020-04-08得票数 0
因此，我正在尝试使用Selenium (Python)浏览药房网站。这个网站提供了数千种药品和保健产品的目录。我试着做一个“横向”的网络抓取，提取每一个产品在目录的每一页的链接(此刻，我可以这样做)。
当我试图进入目录的下一页时，问题就出现了，我</
浏览 7提问于2022-02-02得票数 0
我有一个Python代码，它废弃了不同的数据。例如，它从这个Website中删除了。mylink.org/" class="button full w-button" style="transition: all 0.4s ease 0s;">Website</a>
它正常工作，但现在由于错误而失败了post“：”{\“User\”User\“：\"link text\"，\”sessionId“：\"a7
浏览 1提问于2018-02-11得票数 1
回答已采纳
1回答
我正在制作一个爬虫，可以用于所有的电子商务网站。目前，我正在以下网站上测试我的爬虫。
在中，我需要单击显示更多结果，以便显示更多产品</e
浏览 1提问于2014-06-14得票数 0
1回答
我四处寻找网络和亚马逊关联apis，但找不到一种方法，除非亚马逊产品页面，以提取一些数据显示在我的网站上。我有输入框，用户可以复制/过去的亚马逊链接，我想创建预览到下一页的产品使用图像，价格和其他内容，并链接回页面。我看到了这个，我试着使用
浏览 0提问于2017-03-20得票数 1
我刚接触网络抓取，我正在尝试从亚马逊上抓取评论。 在亚马逊上打开一个特定产品的页面后，我想点击“查看所有评论”按钮。我检查了页面上的元素，我发现see all reviews按钮有这样的结构 structure 所以我尝试使用类名a-link-emphasis a-text-bold来查找这个元素。这是
浏览 203提问于2021-04-03得票数 1
回答已采纳
我正在做一个网络抓取项目，在那里我试图从亚马逊网站上抓取信息。在网站中，有一个无序的列表，上面有这样的信息。问题是我不想要名单上的所有信息。只有ASIN密码。li标记没有任何特定的类或ID。下面是指向的链接
在selenium之前，我<em
浏览 5提问于2020-06-02得票数 1
回答已采纳
1回答
我用python写了一些脚本，使用selenium从redmart网站上抓取不同产品的名称和价格。我的目标是单击主页面上部10个类别中的每个类别，并解析所有转到目标页面的产品。然而，当点击一个类别时，浏览器是在新打开的页面上，所以在这一点上，有必要再次转到主页，单击10个类别链接中的另一个。我
浏览 3提问于2017-08-07得票数 1
回答已采纳
2回答
我正在创建一个脚本，在这个脚本中，我试图从网站上专门抓取m4a文件。目前，我正在使用BS4和selenium来实现此目的。from selenium import webdriv
浏览 1提问于2021-01-22得票数 1
我正在试着写一个程序，可以为战争机器4获取你的信息。我知道如何解析网页之类的，但我从来没有花时间通过python登录一个网站。现在，这带来了一个问题，因为我需要登录到我的Microsoft Live个人资料来获取我的统计数据。我试过我认为可行的方法，但每次都走进死胡同。这就是我</em
浏览 10提问于2017-03-13得票数 1
2回答
使用请求登录网站
、、、
我以前的问题()给出了一些很棒的答案，用它我可以刮掉很多网站。但是我现在正在做的网站是很棘手的。我不知道是网站漏洞还是故意做的事情，但我不能刮它。print(str(tree.xpath("//*[@id='site-header']
浏览 5提问于2017-02-01得票数 0
回答已采纳
1回答
我是r和Webscraping的新手。我目前正在抓取一个房地产网站(https://www.immobilienscout24.de/Suche/S-T/Wohnung-Miete/Rheinland-Pfalz/Koblenz?enteredFrom=one_step_search)，但我没有设法抓取具体报价的链接。 当使用<e
浏览 24提问于2019-10-01得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
