腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
0
回答
远程
服务器
无法访问本机redis?
、
、
、
将
爬虫
部署
到腾讯
云
服务器
后,
云
服务器
一直无法访问本机的redis。本机的redis已经开启远程访问。 360截图-8277578.jpg
浏览 297
提问于2019-05-22
1
回答
定期运行
python
程序作为防火墙中的后台服务。
、
、
我已经有了负责解析数据的
python
爬虫
,但是我不知道如何(在后台)在firebase中执行
服务器
的这个
python
爬虫
(或者根本不可能)?下面是我的系统的示例用法 用户可以从数据库中看到网站变更的摘要。我想到的一个选择是在本地机器上运行
爬虫
,并使用REST将解析的数据更新到firebase数据库。然而,这似乎是一种非常低效/天真的方法,因为它有点失
浏览 0
提问于2018-01-25
得票数 3
1
回答
如何在Heroku
云
上
部署
Scrapy spider
、
、
、
我在scrapy中开发了几个
爬虫
&我想在Heroku
云
上测试它们。有没有人知道如何在Heroku
云
上
部署
Scrapy spider?
浏览 1
提问于2012-10-08
得票数 11
回答已采纳
0
回答
如何加速海外
服务器
的响应?tx的CDN看了一
下
,1tb要100软妹币?
、
、
、
、
实验室牛马一枚,被拉来干
爬虫
的协同
部署
,还得抓取数据反馈给中台,结果被腾讯
云
新加坡丢包75延迟500狠狠的上了一课,开发调试都困难,有无大佬提供加速思路?一时半会不敢找导师,最近刚找他报销
服务器
费用???
浏览 22
提问于2024-03-26
1
回答
怎样在不使用远程桌面的情况
下
就能查看储存在腾讯
云
服务器
上面的文件(不是网盘)?
、
、
、
、
在
服务器
上
部署
了
爬虫
,想在不使用远程桌面的情况下直接就能查看
服务器
硬盘上
爬虫
爬取到的最新数据,想问一
下
该如何实现?
浏览 339
提问于2020-04-16
1
回答
用的这个代码,点击下载后出错 能帮忙看下吗?
、
、
、
python
爬虫
--不限平台歌曲下载(收费也可) -
云
+社区 - 腾讯
云
(tencent.com) image.png
浏览 172
提问于2022-05-26
1
回答
django
部署
云
服务器
提示虚拟环境问题?
、
、
、
、
我使用django实现了一些接口,想要
部署
到
云
服务器
上来为我的小程序使用,但是
部署
中遇到了很多问题,其中一个始终没有解决,能麻烦大佬们帮看一
下
么图片图片图片 请大佬解惑,(暂时不涉及调用DB,文件内置了信息)
浏览 229
提问于2023-03-30
1
回答
通过google cloud sdk
部署
到应用引擎时导入安装模块错误
、
、
、
我正在尝试在应用程序引擎中
部署
服务。您可能知道,在应用引擎上
部署
通常需要两个步骤: 1.在本地开发应用
服务器
上
部署
2.如果步骤1成功,则在
云
上
部署
我的问题是在步骤1中加入了第三方
python
库,比如numpy、sklearn、gcloud我正在尝试在本地devapp
服务器
中
部署
服务。当我在main.py脚本中导入numpy或任何其他第三方库时,它抛出一个错误,指出找不到模块。我使用
云
sdk,有两个
pytho
浏览 0
提问于2016-11-30
得票数 1
1
回答
AWS和
Python
线程可伸缩性
、
、
我在本地
服务器
上运行了一个使用库编写的服务。可以把它想象成一种网络
爬虫
。它使用50个线程。我想把它
部署
在
云
上,并向上扩展,这样它就可以使用更多的线程。线程从Qinput中挑选URL,获取网页内容并将其放到Qoutput中 问:我只需将线程数量增加到500、5000或50,000,AWS +
Python
就可以处理它了吗?
浏览 1
提问于2013-01-09
得票数 0
回答已采纳
1
回答
在ubuntu的后台运行时,
爬虫
停止。
、
我使用具有无限循环的
python
制作了一个简单的
爬虫
,所以它不能停止。随机延迟17 ~ 30,这个
爬虫
爬行相同的一个页面,并找到'href‘链接,定期更新,并存储到Mysql。我使用了Ubuntu
服务器
。因为我使用了Linux命令这个
爬虫
是在Ubuntu
服务器
背景
下
运行的。我想它已经运行了大约4个小时。但
爬虫
突然停止了。第二天我再试一次。而且效果很好!有什么问
浏览 1
提问于2014-05-20
得票数 0
回答已采纳
1
回答
如何轻松地在远程github分支和本地分支/文件夹之间切换?
、
、
、
我用
Python
2.7编写了大量的Scrapy爬行器。我需要将它们全部转换为支持
Python
3,这种转换必须在1 go内完成。我只能在
Python
3
爬虫
做好
部署
准备之后才能开始使用。我不能一次
部署
一个
爬虫
。我目前有一个远程分支,它是主分支。让我们称之为遥控器-A。这就是容纳所有爬行器的分支,它们每天都会被执行。这个分支必须继续运作。现在,由于“所有操作都必须保持活动状态”,我需要一个单独的
Python
3
浏览 3
提问于2019-09-10
得票数 0
回答已采纳
1
回答
我是在使用内置在
服务器
中的
Python
烧瓶吗?
、
、
、
我正在通过IBM /Bluemix的
python
烧瓶应用程序在
python
中构建一个后端。我听说/读到很多人抱怨在
服务器
中内置的烧瓶不利于生产。但是,我如何知道应用程序是使用内置的
服务器
,还是IBM设置了其他内容?有什么简单的方法可以在代码中看到这一点吗?
浏览 0
提问于2018-02-02
得票数 0
回答已采纳
1
回答
只爬行一次URL的刮伤蜘蛛
、
、
、
、
一个完整的刮板示例,无论它是否使用链接中间件,都可以在不撤销URL的情况
下
多次运行。 我已经在下面发布了代码来启动业务,但是我不一定需要使用这个中间件。任何能够每天爬行和提取新URL的刮痕蜘蛛都可以。
浏览 4
提问于2016-06-10
得票数 6
回答已采纳
2
回答
Google上用于长期任务的
云
功能的替代方案
、
、
我一直在使用 (GCF)来设置一个无
服务器
环境。这很好,它涵盖了我所需要的大部分所需的功能。此外,一些FTP
服务器
要求它们将发出这些请求的ip地址白名单。当使用
云
函数时,除非您以某种方式保留静态地址,否则这是不可能的。因此,我正在寻找一种替代解决方案,在Google平台上执行云中的
Python
脚本。所需经费如下: 它需要支持
P
浏览 0
提问于2019-07-25
得票数 0
回答已采纳
2
回答
关于腾讯
云
服务器
乱码的问题?
、
腾讯
云
Centos7.1 64位系统。我在本地win8环境
下
用java写了个小
爬虫
程序,没什么问题,但将程序部到
服务器
上就发生了乱码 ,我的编码设置就是网页源代码的编码。求帮助。。
浏览 850
提问于2016-03-17
1
回答
使用
Python
的防火墙
云
函数?
、
、
、
、
作为这项工作的一部分,我们需要
部署
许多云功能,这些函数将充当进行后端处理的修复触发器。 我们的目的是通过使用Firebase工具将
部署
封装在firebase中。但是,当我们试图使用"firebase init函数“启动函数的Firebase项目时,只有两种语言选项是"Javascript”和"Typescript",唯一可
部署
的堆栈似乎是Node.js。在以前的GCP项目中,我们
部署
了基于
Python
的
云
函数(使用gcloud cli),理想情况<
浏览 0
提问于2019-07-22
得票数 57
回答已采纳
1
回答
为什么在将我的工作
爬虫
部署
到
云
平台后,它现在只得到了400个响应?
、
、
、
我使用scrapyd将我的
爬虫
部署
到
云
平台。
爬虫
在本地计算机上工作正常。但是现在它只能得到http 400的响应。它被禁止了吗?还是硬件无法处理频繁的请求?我用的是最低规格的。
浏览 0
提问于2020-05-04
得票数 0
1
回答
高级数据库爬行器调用的第一个方法
、
、
目前我使用的是sitecore 6.6和高级数据库
爬虫
。我的sitecore环境目前是内部
部署
1 cm,
云
上
部署
1张cd。ADC现在工作得很好。 我能知道哪一行sitecore调用了ADC方法吗?
浏览 2
提问于2013-10-22
得票数 0
1
回答
我可以在不使用
云
功能的情况
下
用防火墙托管实现角通用吗?
、
、
我在火力基地
部署
了一个9角的应用程序。我正计划为SEO执行角通用SSR。另外,如果可能的话,如何将输出
部署
到firebase ? 3.1,是否
浏览 5
提问于2021-02-27
得票数 0
3
回答
用于调试phantomjs脚本的GUI
我正在使用phantomjs来构建一个网络
爬虫
。我目前使用的
爬虫
是一个使用selenium的
Python
脚本,它需要一个正在运行的Firefox浏览器。虽然Selenium非常适合于调试脚本(因为我可以使用firebug来检查网页),但是如果没有GUI,它就不能
部署
到linux
服务器
上。因此,我正在尝试将我的
Python
脚本转换为phantomjs。 为了调试phantomjs脚本,我将页面源代码html保存到磁盘并呈现png屏幕截图,然后在Firefox中打开它以检查源页面。
浏览 1
提问于2013-07-31
得票数 6
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Python Scrapy 爬虫(三):部署环境搭建
Python Scrapy 爬虫(四):部署与运行
01-Linux下Python开发环境部署
centos7下安装Python爬虫框架scrapy
ubuntu下django部署到apache服务器上
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券