我有一个python web抓取脚本，在手动启动时运行良好。但是当它作为cron作业启动时，它总是挂起。cron作业以我的用户身份运行，因为我是使用crontab -e以我的用户身份创建它的 我不知道为什么它不能像cron那样工作
浏览 23提问于2020-07-03得票数 0
1回答
我经常发现自己在设计简单的小web项目，这些项目提供聚合内容或进行“mashup”。通常，这需要运行一个脚本来周期性地抓取/解析/操作一些数据，然后将其作为“静态”内容提供。我将“刷新”脚本作为cron作业运行，该作业生成提供给最终用户的HTML。内容不会经常更改，所以我通常可以每小时运行一次cron作业。
有没有更好的方法来做这件事？
浏览 2提问于2010-07-20得票数 0
回答已采纳
然而，作为一个常见的窗口，它确实挂/冻结/BSOD偶尔，随机。因为我不是一直都在它前面，有时我不会知道它卡住了很长时间，直到我检查它，并不得不手动硬重新启动它。运行在我的主机服务器(我为我的网站拥有一个托管空间)的PHP脚本( webservice)可以监听这个特定的ping (或消息)，然后等待。因此，每当窗口挂起/冻结时，.bat文件也将停止发送，在接下来的10分钟内触发websvc的通知。
这是一个想法，但坦率地说，我仍然不知道如何在技术上真正实现它，也不知道它是否真正可行。非常感谢对这个想法的任
浏览 8提问于2018-01-13得票数 0
回答已采纳
我有一个网页抓取脚本，它基本上是从一个网站上抓取一个故事(标题、描述/摘要和故事文本)，通常在多个页面中，然后将其全部写到一个文本文件中。目前，我复制一个url并从PyCharm运行python脚本，它给出了我需要的结果。但是，我希望自动运行脚本部分，以便每当我复制包含特定文本(例如网站名称)的url时，它就会自动输出文本文件，而无需每次复制url时运行脚本。
浏览 7提问于2021-12-30得票数 1
我有一个基于Django的web应用程序，该应用程序的一些功能计划使用作为cron作业的一部分运行。我想挂起调试器，这样我就可以检查代码中的一些奇怪的行为。我通常使用可视化演播室代码。是否有可能挂起调试器，因为cron作业基本上是独立于服务器运行的？
浏览 1提问于2019-02-13得票数 1
回答已采纳
在我的项目中，我必须在subuntu服务器上安排一个作业；我尝试使用Cron，如下所示： $ sudo nano /etc/crontab 然后，在文件的末尾附加我的命令： 00 5 * * *ubuntu /usr/bin/python /var/www/web/core/frontend/allschemas.py 为了在每天下午5点开始我的python文件调用如果我尝试从server
浏览 30提问于2018-12-24得票数 0
我对google-cloud-platform世界相当陌生，我正在为我的第一步而苦苦挣扎。所以，我想知道的是如何制作一个webhook应用程序，它可以全天候运行，并“捕捉”来自另一个第三方服务的数据(稍后我会尝试用这些数据做一些事情-操纵它并推送到一个数据库中，但这是一个更难的问题)。我已经在基于Linux的GCP上设置了一个实例，但是，下一步呢？我对PHP很熟悉，但这次我想用Phyton (现在就学习)来做。我应该使用GCP中的哪个服务，以及如何设置服务器来捕获第三方服务发送的每个数据？
浏览 5提问于2016-12-28得票数 1
我有一个python脚本作为cron作业，称为当脚本中发生错误时，cron作业将悄然失败。在作为cron作业运行时，如何将脚本输出堆栈跟踪(或将其写入文件)？我已经设置了MAILTO变量。我也试过
/path&
浏览 0提问于2011-09-13得票数 2
回答已采纳
我正在编写Python脚本，它应该执行以下操作：
从“更新”部分抓取数据。
浏览 8提问于2015-07-29得票数 0
1回答
我想运行一个cron作业来为Ubuntu桌面20.04上的临时用户擦除文件。由于系统不会定期断电(我只需要使用@reboot /path/to/my_script.sh )，是否有办法在计算机暂停时调度cron作业来运行？我在Google上看到的一切都与运行cron作业有关，而计算机被挂起，但我想使用挂起，或者使用唤醒作为这个cron作业的触发器。
浏览 0提问于2021-04-01得票数 1
回答已采纳
我在python中有一个web抓取脚本，它可以访问特定的网站，登录我的凭据并执行一些操作(比如按一些按钮等等)。我想在特定的时间间隔上运行这个脚本(比方说，在上午8点到下午3点之间每隔1小时运行一次)。
我发现像cron作业这样的东西可以处理时间部分。但我也希望它能够独立于我的设备运行。
浏览 2提问于2021-05-10得票数 0
我试图在我的Raspberry Pi ()上运行一个python脚本，作为cron任务，但是这个脚本无法完全运行。为什么这个命令作为终端上的bash命令正常工作，但却不能作为cron作业工作？我还试图在cron作业命令中声明python到：#0,30 * * * * /usr/bin/python /home/pi
浏览 0提问于2018-09-14得票数 0
1回答
我计划有一个大型集合，其中包含需要由Quartz/cron作业处理的项。因此，cron作业将设置为定期运行，并访问mongodb以查找5个最旧的项并对其进行处理。这对于运行cron作业的单个服务器来说是可以的。但是，稍后如果我运行两个服务器，每个服务器都运行相同的cron作业，我担心这两个cron作业可能会同时运行，并抓取5个相同的项目，这可能会导致竞态条件问题。
避免此问题的最佳实践是什
浏览 0提问于2018-11-10得票数 0
cron作业是消耗大量资源的繁重而昂贵的过程吗？或者它们基本上是命中该页面(不管cron触发它时执行的脚本是什么)
我打算为几个站点使用多个cron作业。假设我有3个不同的cron工作，每分钟都会有10个站点的特定页面。有没有人像浏览器点击(-wget.>/dev/null 2>&1)那样有10或100个这样的cron作业？进一步解释；您可能知道，如果没有人在预定事件发生时访问WordPress
浏览 1提问于2014-04-08得票数 10
回答已采纳
2回答
我正在用MongoDB作为数据库使用Nodejs构建REST。只有cron作业才会使用POST路由。
cron作业正在从其他人、REST和一些web抓取中获取数据。将我的cron与API放在同一个应用程序中是个好主意，还是如果我必须创建另一个应用程序来管理我的cron作业并填充我的
浏览 3提问于2019-12-22得票数 0
我需要运行arp命令或任何其他s/w的linux谁可以显示输出的所有mac地址的计算机是连接在局域网有线连接。此命令需要从root运行apache。因此，安全问题也很重要。
浏览 1提问于2013-01-24得票数 1
1回答
Crontab作业即服务
、、、
我有一个从web服务中提取一些数据并填充mysql数据库的脚本。因为它每分钟运行一次，所以我添加了一个cron作业来执行脚本。我正在考虑一个在脚本中设置和检查全局变量的实现。但我想我应该先找到更合适的解决方案。越简单越好-我对脚本和ruby都是新手。
浏览 2提问于2012-07-22得票数 1
回答已采纳
我每天都有一个cron工作，一次抓取10个用户，并与他们一起做一堆事情。每天都有1000个用户参与到这个过程中。我不希望cron作业重叠，因为它们对服务器负载很重。我曾尝试使用标志将cron作业标记为正在运行，但它不够可靠，因为一些PHP脚本可能会超时或以各种方式失败。有没有好的方法可以阻止cron作业多次调用PHP脚本，或者控制它被调用的次数，比如只有3个实例？
如果可能的话，我更喜欢PHP中的解决方案。目前，我将
浏览 2提问于2010-05-12得票数 0
回答已采纳
1回答
我想用这个作业在ubuntu中设置一个cron作业If program is terminated, set the cron job again (until infinity in cron's method)
somethinglike * * * * * /python.py (but only when the python</
浏览 1提问于2014-03-21得票数 1
2回答
它由存储在HDFS上的文件和一堆编写API调用并触发猪作业的python脚本组成。这些python作业是通过cron调度的。
我想了解在GCP中做类似事情的最佳方法。我知道我可以使用GCS作为HDFS的替代品。该Dataproc可用于拆分Hadoop集群并运行Pig作业。是否有可能将这些Python脚本存储到GCS中，有一个类似cron的时间表来拆分Hadoop集群，并指向GCS中的这些Py
浏览 10提问于2022-03-31得票数 2
回答已采纳
云服务器
ICP备案
云直播
实时音视频
即时通信 IM
腾讯云开发者
