腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
我怎么能强制停止我的
爬虫
得到一个特定的网址抓取最后一次?
、
、
、
、
我正在制作一个
爬虫
来找出最近添加的youtube
视频
,当我的
爬虫
到达旧
视频
(在前一个转弯中爬行)时,我想停止
爬虫
。我使用的不是scrapy和漂亮的汤,我使用的是python库。请给我推荐任何选项
浏览 9
提问于2017-06-27
得票数 0
1
回答
node.
js
网络
爬虫
图像/
视频
、
、
、
最近我一直在使用网络
爬虫
,我已经想出了如何搜索文本,但有没有办法让我的网络
爬虫
搜索其他东西,比如
视频
和图像,然后下载它们并组织它们。这是目前为止我的网络
爬虫
:var cheerio = require('cheerio');});我已经从一个在线教程中获得了大部分代码,以帮助
浏览 3
提问于2016-09-04
得票数 0
1
回答
python scrapy在尝试使用参数时找不到爬行器
、
为什么蜘蛛的名字永远不会被
抓
抓
爬虫
读到,就像
抓
抓
蜘蛛一样?非常感谢您的帮助
浏览 0
提问于2012-10-09
得票数 0
1
回答
问题在使网址为网站使用php和ajax
、
、
我的
视频
在这个页面上工作得很好。我正在使用Ajax调用加载
视频
。
视频
工作正常,但我有一个问题,搜索引擎不会索引我的页面,因为这些页面是通过ajax加载的。如果有人能帮助我,我可以让我的
视频
的url类似于www.illamicaim.com/category/artists/title。
浏览 4
提问于2011-05-22
得票数 2
回答已采纳
2
回答
如果我使用iframe,一个自我托管的
视频
会在Google
视频
搜索中被索引吗?
、
、
、
、
我们为
视频
创建了一个托管域,并使用iframes将它们嵌入到我们的网站上。这会妨碍谷歌
爬虫
在谷歌
视频
搜索中为我们的
视频
建立索引吗?
浏览 0
提问于2020-06-28
得票数 3
回答已采纳
2
回答
嵌入式youtube
视频
抓取链接
、
、
、
、
我试图收集的数据是youtube
视频
嵌入到他们的页面中的链接。问题是当我使用urllib2时,我无法执行
js
,所以链接不会出现在我的代码中: response = OPENER.open("https://www.hopenglish.com/how-sugar-affects-the-brain(几乎我所有的
爬虫
都已经实现了,我只需要嵌入
视频
的youtube链接)
浏览 2
提问于2016-12-13
得票数 1
回答已采纳
1
回答
认证所需的内容如何被索引/爬行?
、
、
、
假设我们有一个可以观看在线
视频
的VOD平台,并且需要认证来显示该
视频
或任何类型的内容。用户必须注册,然后,他们可以访问
视频
等。这些
视频
对网站SEO真的很重要,我想知道搜索引擎
爬虫
如何访问通常需要认证过程才能访问的内容?
浏览 0
提问于2021-05-11
得票数 1
1
回答
爬行url \如何在node.
js
中获取动态链接
、
我正在使用
js
爬虫
来抓取网站,现在我遇到了CNN,的那一部分(基于某种原因动态生成的urls)。事情是
爬虫
,不要真正接触脚本-我应该如何解决它?除了我的node.
js
爬虫
之外,我还应该编写自己的代码吗?是否有先进的
爬虫
知道如何处理这种动态行为?
浏览 1
提问于2016-07-23
得票数 2
回答已采纳
1
回答
JS
:
抓
不到json键
、
我正在提交一个JSON,并试图访问各个密钥。 const jsonData = target.getAttribute('datas'); console.log(jsonData[0].id); // returns undefined for(let key of Object.keys(jsonD
浏览 8
提问于2022-05-25
得票数 0
1
回答
就像
视频
中所显示的那样,破解wifi密码也一样容易吗?
、
、
我当时正在浏览YouTube,在
视频
中我偶然发现了这段
视频
,他们展示了如何使用CommView、Aircrack和Wordlist破解wifi的密码。根据这段
视频
,破解密码需要大约两分钟,但我想可能需要更长的时间,这取决于密码的难度。但是这种方法的缺点是什么呢?我的意思是,如果破解wifi密码如此容易,为什么需要付费的wifi存在,例如在机场?是100 %被
抓
的感觉吗?还是
视频
中的那个人破解了一个“简单”的无线网络? 对于主要的问题,怎样才能保护自己免受这样的攻击呢?
浏览 0
提问于2016-09-04
得票数 2
回答已采纳
3
回答
"invalid request check content-type and body?
、
您好,调用“唇语活体检测
视频
身份信息核验”,总是报错这个。
抓
包看了看content-type和body没什么问题。不清楚问题处在了哪里?请指教。
浏览 812
提问于2018-03-15
2
回答
保存网页以供脱机浏览
、
、
、
我正在尝试创建一个android应用程序来保存网页,以便在offline-browsing,中使用它--我能够保存网页,但问题在于内容(图像、javascripts、..etc),有什么方法可以这样做-- programmatically,使用eclipse并在模拟器上测试我的工作。
浏览 0
提问于2010-12-30
得票数 1
回答已采纳
1
回答
向机器人隐藏代码
、
、
、
、
有没有一种方法只对
爬虫
隐藏页面的特定部分?那么,有没有办法对机器人隐藏某些部件,但在未来不会对用户隐瞒?不是整页,只是部分。但没有理由不让智能
js
阅读
爬虫
来隐藏它。麦芽酒
浏览 6
提问于2014-10-16
得票数 0
回答已采纳
1
回答
我是否可以使用网络
爬虫
将新的youtube
视频
添加到播放列表?
、
、
这是我想要做的:我订阅了一些You Tube频道,我将以IGN为例,一天上传多个
视频
。我想编程一个网络
爬虫
去到IGN的你管页面在晚上11:00每晚,并添加过去24小时内上传的每个
视频
到一个新的播放列表,然后命名该播放列表与日期。例如:"IGN新闻3.18.16“ 这是可以用Javascript的网络
爬虫
来完成的事情吗?如果是这样的话,我该怎么做呢?
浏览 5
提问于2016-03-19
得票数 0
1
回答
500G 在哪儿能找到资料?
、
、
、
、
500G python web、
爬虫
、数据分析、机器学习、大数据、前端实战项目
视频
代码免费分享 在哪儿能下载到资料,在线等,挺急的~, 感谢各位大佬~
浏览 306
提问于2019-05-10
6
回答
如何让搜索
爬虫
正确地索引无限滚动的页面?
、
然而,这意味着搜索
爬虫
无法获得第一个“分页符”之后的所有内容。例如,我有一个页面,其中列出了所有带有"infographic“标签的项目。实际上有几十个这样的项目,但
爬虫
只能看到前10个项目,因为其他项目是根据内容相对于浏览器窗口的位置加载的。由于
爬虫
没有浏览器窗口,所以根本不会加载新项目。那么,什么才是正确的方式,让搜索
爬虫
通过无限滚动访问网页的全部内容,同时又允许用户享受无限滚动和没有分页的情况?
浏览 0
提问于2012-05-28
得票数 13
回答已采纳
1
回答
服务端渲染如何帮助
爬虫
?服务器端渲染和客户端渲染哪个更好?
、
、
、
我正在阅读angular的服务器端渲染文档,因为它们提到服务器端渲染是帮助
爬虫
。我知道在服务器端渲染
爬虫
可以获得整个dom,但
爬虫
也可以与组件交互,那么它如何帮助
爬虫
呢?
浏览 18
提问于2019-09-15
得票数 0
1
回答
在Android应用程序中从动态
视频
播放器网页中抓取
视频
链接
、
、
、
我正在开发一个应用程序的目的是从一个在线
视频
播放器下载MP4
视频
。用户打开
视频
播放器,我的应用程序应该下载用户指定的
视频
。
视频
播放器显示动态内容,我的意思是,它可以显示的
视频
没有固定数量。有时它会显示四个
视频
,有时甚至会显示五十个。
视频
播放器上有“下一步”和“上一步”按钮。这些按钮跳过或返回到
视频
播放器当前加载的
视频
。目前,我正在抓取
视频
播放器的网页,当前播放的MP4
视频
的链接可
浏览 47
提问于2019-02-11
得票数 0
1
回答
drupal添加带有
视频
字段的产品
我很难用各种方法将
视频
插入到Drupal产品中。我正在尝试迁移模块以及网络
爬虫
。 在内容类型中,有一个"Youtube
视频
“类型的field_video。我这里需要多个
视频
。如果我点击“添加
视频
”并输入一个新的URL,我可以用web创建这个功能。但是,我更不喜欢在页面上爬行很多次,或者做一些疯狂的迁移。
浏览 0
提问于2013-10-16
得票数 1
回答已采纳
1
回答
如何获取VideoCapture::read获取到的帧的PTS或帧号?
、
、
在我们的实现中,我们需要知道OpenCV解码后的帧的pts或帧号,然后根据解码后的帧做一些处理,然后建立原始流中的pts或帧号与处理结果之间的映射。
浏览 35
提问于2018-08-20
得票数 0
回答已采纳
点击加载更多
相关
资讯
Python爬虫初接触,学会爬虫不抓美女图片干啥!
爬虫——手机抓包,fiddler抓取手机qq请求
运用 Redis 构建分布式爬虫,抓妹子图
python爬虫视频
Python 爬虫,推荐一款简单的抓包工具
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券