我正在构建一个facebook messenger机器人，它抓取一个短语出现的网页，并通知用户，如果有任何出现。我使用JavaScript，NodeJS和Heroku构建了一个基本的facebook messenger机器人，它将收到的消息回传给发送者。我想用Beautiful Soup来做网页抓取部分。是否可以将Node用于机器人，然后使用Python仅用于抓取部分？如果是这样，我该如何加入这两者呢？
浏览 1提问于2016-11-09得票数 0
我试过使用幻影，但显然它是不支持的，有没有办法使用javascript中的azure函数来抓取网站呢？
浏览 0提问于2018-12-10得票数 1
回答已采纳
我需要发生以下事情:用户打开我的应用程序--这会触发服务器端的一个函数(需要大约8秒的CPU密集型抓取函数)。我目前的实现是使用socket.io发射，并在后台线程上通过Redis队列处理抓取功能。
有没有不同的方法来实现这一点，而不是通过套接字连接并从客户端->服务器发送发射，反之亦然？
浏览 37提问于2021-11-17得票数 0
1回答
我正在尝试建立一个简单的web应用程序，使用nodejs和它的两个模块，请求和问候来抓取一个网站。
浏览 5提问于2014-02-27得票数 2
回答已采纳
我基本上是在写一个小的网页抓取代码。最初我使用NodeJS+Request+Cheerio来抓取网站，但后来我意识到Cheerio只适用于静态网页，而不适用于那些使用JS加载DOM对象的网页。
浏览 1提问于2017-08-08得票数 0
我有一个试图使用JQuery抓取网页的NodeJS应用程序。在网页中，我正在尝试抓取：<a href="www.google.com">someTextHere</a>我想通过调用第一个jQuery选择器中的
浏览 1提问于2012-06-17得票数 0
我正在使用请求从某人的SoundCloud页面中抓取网页。在load上，SoundCloud正在检查是否启用javascript，然后加载跟踪列表。当我在抓取页面时，它只返回一个示例html，其中包含一个关于Javascript被禁用的错误。这是一个个人方面的项目，怪异的解决方案是受欢迎的。
浏览 1提问于2015-01-14得票数 0
回答已采纳
2回答
我正试图通过nodejs获取亚马逊的定价信息。但是，我在nodejs中看到的定价表的内容并没有完全呈现出来，只有javascripts。
浏览 4提问于2015-06-23得票数 1
回答已采纳
1回答
我需要能够从HTML的输入文件选择器中抓取一个JSON文件，然后读取它，解析它，并在网页上显示它。有什么想法吗？我在Nodejs上。我提供的是静态html页面。很明显，这很简单，但我却很挣扎。
浏览 2提问于2019-12-29得票数 0
我正在寻找一个插件，它可以生成pdf中的HTML内容(应该可以用于javascript/jQuery/AngularJS)。它也应该有多语种的支持。
浏览 3提问于2017-03-08得票数 1
1回答
(Nodejs)我正在写一个网页抓取器，它运行在一些页面上，截图等。但有时程序太长，有时甚至卡住，网速低，连接中断，库错误……我需要处理这些特定函数耗时超过30秒的情况。
浏览 2提问于2018-10-05得票数 0
我想创建一个动态呈现mongoDB数据的网页。我现在的问题是，一旦我启动了我的NodeJS Express服务器，路由就不会更新，因为一旦从MongoDB加载了数据顺便说一句:我正在使用把手来渲染网页，使用Angular会更容易吗？
非常
浏览 1提问于2018-11-17得票数 1
2回答
我有一个网页，其中有一些JS不会改变dom，但会返回一些数字。我想编写一个NodeJS应用程序来下载这样的页面，并在下载的页面上下文中执行这些功能。我在找cheerio做页面抓取..但是，虽然我看到使用它导航和操作DOM是多么容易，但我没有看到任何运行页面函数的访问。有可能做到吗？谢谢
浏览 2提问于2013-02-22得票数 5
1回答
考虑这个链接：https://www.reddit.com/r/todayilearned/comments/6x6iz8/til_princess_diana_on_live_tv_shook_the_hand_of/?ref=share&ref_source=linkhttp://www.bbc.com/news/av/magazine-39490507/how-princess-diana-changed-attitudes-to-aids
浏览 0提问于2017-09-01得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
