1回答
我正在尝试使用 ()从中抓取URLasync function pageFunction( context ) {
const url = 'https://en.wikipedia.org/wiki/pageTitle = $('title
浏览 18提问于2020-02-28得票数 1
回答已采纳
3回答
我正在尝试使用apify sdk抓取页面内容。这也可以与以下代码很好地配合使用。但是我怎么才能像puppeteer.launch一样强制使用Apify SDK的无头模式({ headless : true})？= "https://somepage/";
process.env.APIFY_LOCAL_STORAGE_DIR = '/someappfolder/
浏览 49提问于2020-10-12得票数 1
2回答
使用Apify进行Web抓取
、、、、
我正在尝试从中抓取URL
我的Apify角色使用Puppeteer平台。所以我使用的是pageFunction 。
浏览 17提问于2020-02-25得票数 1
1回答
找不到木偶剧相关模块和依赖项
、、、、
我使用npm安装了puppeteer，然后在尝试编译它时，出现了以下错误：
To install it, you can run: npm install --save ws/node_modules/puppeteer/node_modules/mime
浏览 1提问于2019-04-04得票数 1
我用我想要抓取的URL设置了一个爬虫，演员正在工作，我用cookie/截图示例进行了测试。我只是在演员和爬虫之间传递cookie时遇到了问题： const Apify = require('apify');
const input= await Apify.getValue('INPUT');
const browser = await
浏览 26提问于2019-05-10得票数 0
我试图通过使用Puppeteer和来解决登录页面上的Recaptcha问题。const puppet
浏览 0提问于2021-10-17得票数 1
回答已采纳
我试图使用app在Play Store上抓取应用程序的页面，并检索一些信息来构建一个定制的RSS提要，类似于显示的。_evaluateInternal (/home/myuser/node_modules/puppeteer/lib/cjs/puppeteer/common/ExecutionContext.js:175-08-27T07:13:48.103Z at async wrap (/home/
浏览 8提问于2022-08-28得票数 0
1回答
我们使用Apify Web Scraper执行元创建一个URL验证任务，该任务返回输入URL、页面标题和HTTP响应状态代码。我们有一组5个正在使用的测试URL:4个有效，1个不存在。成功的结果始终包含在数据集中，但不包括失败的URL。_handleRequestTimeout (/home/myuser/node_modules/apify/build/crawlers&#
浏览 18提问于2021-05-05得票数 0
回答已采纳
1回答
我正在部署一些使用Apify作为Google函数的代码。当触发时，云函数将无声地终止。我做错了什么？下面我用更简单的代码重现了这个问题。虽然本例并不严格要求Apify，但我希望能够使用Apify提供的额外功能。使用Apify的代码：
const Apify = require(&
浏览 0提问于2019-07-10得票数 0
回答已采纳
好的，我试着序列化一个表单数据，但是我在下面的代码中没有定义： const frame = page.frames().find(frame => frame.url().includes('reservation
浏览 16提问于2019-09-23得票数 1
回答已采纳
我正在使用和Puppeteer。我们的目标是运行X个Chrome实例，其中p-queue限制了并发数量。当队列中的任务发生异常时，我希望重新排队。但是当我这样做的时候，队列就会停止。_count++; try {_url);
浏览 0提问于2019-10-14得票数 0
1回答
我目前正在编写一个简单的API，它正在通过Puppeteer执行操作，但是，当我试图执行我的脚本以便访问API时，我的Express应用程序似乎在Puppeteer打开后停止了侦听吗？这是我的剧本：const puppeteer = require('puppeteer-extra');
浏览 1提问于2020-06-13得票数 0
回答已采纳
在args中配置puppeteer Crawler启动选项是否更好，就像在puppeter中那样： const pptr = require("puppeteer");
headless: false, '--lang=fr' })(); 在Apify中，据我所知将是这样的： const Apify = requir
浏览 45提问于2020-09-25得票数 0
1回答
我试图通过提供案例编号来抓取https://web6.seattle.gov/courts/ECFPortal/Default.aspx中的案例信息和文档。const Apify = require('apify'); puppeteerconst saveScreen = async(page,(key, screenshotBuffer, {
content
浏览 19提问于2019-10-07得票数 0
回答已采纳
Apify可以从sitemap.xml抓取链接 const requestList}...`); url: request.url,
浏览 0提问于2019-08-20得票数 3
回答已采纳
我正在学习如何在Apify Web-Scraper中使用request，我不明白它是如何工作的。 我首先用Postman做了这件事，我确实得到了我想要的结果，现在我想在Apify上做同样的事情。const request = new context.Apify.Request({
url:...
浏览 20提问于2019-09-02得票数 0
回答已采纳
有了Apify/Puppeteer，除了包含某个单词的页面外，我还能爬行所有页面吗？在handlePageFunction内部，原始代码如下所示 requestQueue,如果我想避免包含"foo“的页面URL，那么我是否可以在pseudoUrls中调整一些内容来修复这个问题呢？
浏览 14提问于2022-07-08得票数 1
回答已采纳
在puppeteer文档中，我发现可以使用await page.authenticate({ username: 'test', password: 'test' });访问具有基本身份验证的页面。Apify.main(async () => {
await requestQueue.addRequest({
浏览 20提问于2020-10-09得票数 0
回答已采纳
1回答
可以使用带有伪URL的Apify抓取多个页面吗？ 当人们问同样的问题时，答案大多指向伪URL，如果有可能或不可能这样做，并不会直接解决问题。如果我在运行爬虫的时候不知道伪URL，并且我从一个页面上抓取了10个链接-然后想要抓取这10个链接，那怎么做呢？https://kb.apify.com/tutorial-creating-your-first-crawler/crawling-multip
浏览 15提问于2019-03-19得票数 0
2回答
我需要使用和来自动登录到一个受密码保护的网页，并点击一个按钮。我该怎么做？目标URL将不时更改。")
据我所知，这不是一个刮擦的工作，因为我不希望从网页返回数据，所以我不应该使用或。到目前为止，我有以下几点。然而，Apify时间内的Puppete
浏览 1提问于2019-10-03得票数 3
云服务器
ICP备案
云直播
腾讯会议
实时音视频
腾讯云开发者
