1回答
我正在尝试刮一个电子商务网站(Lazada.sg)，我发现了一个基于scrapy：的Github代码。我正在尝试复制乐高项目。如果我能在显示URL的格式上得到一些帮助，我会很高兴，因为它的格式与他对刮刮的格式相同，所以我可以在我自己的用例中重用他的代码。谢谢
浏览 7提问于2022-09-07得票数 1
回答已采纳
，它有一个拖放视觉界面，使孩子可以构造编程指令，为屏幕上的行动，并控制乐高WeDo硬件。但是，尽管有开源的特性，除了乐高之外，对更便宜的硬件的改造却很少。
浏览 0提问于2016-09-26得票数 0
回答已采纳
1回答
我想从这个站点的电子表格中抓取数据--我已经尝试过很多种方法，但是它显示了一个错误。在电子表格中使用IMPORTXML，IMPORTHTML --它不起作用提前谢谢你的帮助。import requests
"Host": "www.angel.co",
"User-Agent": "Mozilla/5.0 (X1
浏览 2提问于2021-06-05得票数 0
你好普罗米修斯专家，当我在Prometheus文本框中尝试"process_cpu_seconds_total“时，它不会返回任何值。我的安装有什么问题？
浏览 2提问于2022-02-18得票数 0
1回答
刮刮解析
、、、
我正在运行CentOS6.5Python2.7.5import scrapy
class PdgaSpider(scrapy.Spider):
浏览 2提问于2017-05-06得票数 0
1回答
我正在努力刮去惠誉评级的网站，直到现在我都无法得到我想要的:收视率的列表。当我与R擦拭时，它返回网站的标题，并在正文中从googleTagManager获得一个"iframe“，即”隐藏“重要内容。返回：
浏览 2提问于2019-09-04得票数 1
回答已采纳
但这不是我想要的:我想要的是，当我点击新闻时，它应该以某种方式创建一个页面，其中的新闻内容会再次从该新闻的页面中刮出(我只需要图片和新闻片段！)
浏览 1提问于2013-01-01得票数 1
1回答
如何停止从目标url重定向到另一个url，这是一个带有captcha的网站的确认页面？yield scrapy.Request(meta={'handle_httpstatus_list': [302], 'dont_redirect': True, 'redirect_enabled':False},url=url, callback=self.profileCategoryPages)
现在它将我从一个网页重定向到另一个网页。我不知道为什么会这样。当我第一次运行它时没有发生这种情况，但是当我第二次运行它，并且一次又一次地运
浏览 3提问于2017-07-27得票数 0
实际上，我希望将这些服务器刮两次--本质上是从每个服务器上的两个不同端口读取度量标准。
我不知道如何做到这一点:我无法控制领事服务器暴露给普罗米修斯关于他们自己的内容。
浏览 6提问于2016-11-07得票数 3
回答已采纳
1回答
📷ORM类是sequelize.js的包装器。它建立到数据库的连接，加载模型，与数据库同步。
app.js在ORM中，然后在刮板类中。我的问题是:刮板类应该如何将收集到的数据刷新到数据库？它应该导入ORM (连接)，并有一个刷新方法，该方法检查数据是否已经被刮过。如果没有，那就保存它。有件事告诉我，这不应该是刮板班的工作。
浏览 0提问于2017-07-10得票数 0
回答已采纳
我知道，刮来了。我所缺少的是知识，如果有什么工具可以使用Django来抓取与现有数据库/模型兼容的页面呢？
请注意，我想要运行这个刮擦任务，例如每5分钟，所以它不会是一次运行脚本。
浏览 1提问于2018-06-06得票数 1
回答已采纳
2回答
我的老板给了我一份大约3500家公司的名单，并希望明天之前每个公司都能收到通用的联系邮件。我知道这听起来有点迟钝，但我们的当事人要求这么做。我想采取的方法是：
如果有人能帮我用蟒蛇或红宝石写剧本，我会非常感激.
浏览 2提问于2012-03-26得票数 0
1回答
有些需要几分钟，有些需要几个小时，以及介于两者之间的任何东西--然而，每次运行所用的时间通常都是相同的-因此，您可以假设刮板X的运行时间与刮板Y和Z的运行时间大致相同。
浏览 42提问于2021-09-16得票数 3
3:在Google中使用cron任务
我不知道GAE如何喜欢让它的用户定期运行刮板。而且，GAE没有真正的cron --它只是在一个固定的时间间隔内点击一个URL。
浏览 3提问于2011-12-09得票数 1
我将数据存储在SQL数据库中，为了更好地处理时间序列数据，我希望将其复制到prometheus中。我尝试的是公开这样的文档：energy_amount_watt_hours{meter="A",type="generator"} 8275866 1529787904
energy_amount_watt_hours{meter="B",type="grid_import"} 6
浏览 1提问于2018-06-23得票数 4
回答已采纳
1回答
标题听起来有点令人困惑，但我正在尝试获取instagram页面所有追随者的追随者数量。因此，一个示例输出将是adam 120 followers到目前为止，这就是我所拥有的，但在这一点之后，我不知道如何利用请求提供给我的数据。这是因为我没有看到实际的跟随者数据。任何帮助都将不胜感激。username = "nfl"r = requests.get
浏览 5提问于2022-11-11得票数 0
1回答
有什么工具，我可以用它来了解通过谷歌搜索的搜索结果吗？比方说，如果我想要iPhone电池或ios性能的查询，人们可能已经搜索了一段时间，有什么类似的趋势，可以列出相关的查询吗？
浏览 0提问于2017-05-11得票数 1
1回答
Web抓取:如何选择代理
、、、、
我想写尽可能可重用的网页刮刀。我要把它写在Selenium + PhantomJS上。PhantomJS将使用一个IP池(代理)。有一个庞大的免费代理列表，。沃卡轮
我在Heroku上部署了我最简单的应用程序。该应用程序提供了一些html内容。我使用了不同的代理(响应时间<300 in )而不是151.252.120.177:8080 (参见下面的代码)，并注意到它们中的大多数无法在15秒超时时间内解析最简单的html。其中一些(甚至更慢的)在一秒钟内检索到内容。为什么有些代理无法达到我的内容？他们
浏览 2提问于2017-03-14得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
