我有一个具有132个插槽的执行主机，并且condor将很乐意在那里运行132个作业。但是，根据作业的不同，这132可能会占用所有的RAM，并导致交换和最终的垃圾处理。如何设置配置选项“如果使用的RAM大于nnGB，则不运行作业”？
我读过，但它没有说明如何做到这一点。当我说RAM已用时，我取的大约是我在free的used列中看到的</em
浏览 4提问于2018-02-24得票数 0
1回答
我读过一些关于spark和底层RDD的文章，但我不能理解如何处理并发查询？例如，如果我运行一个查询，将数据加载到内存中，并且整个可用内存被消耗，同时其他人运行一个涉及另一组数据的查询，spark如何为这两个查询分配内存？另外，如果考虑到优先级，会有什么影响。另外，运行大量并行查询会导致机器挂起吗？
浏览 2提问于2014-11-11得票数 1
1回答
我对科学的工作流调度很感兴趣。我试图从中找出并修改飞马工作流管理系统中的现有调度算法，但我不知道它在哪里，也不知道如何做到这一点。谢谢!
浏览 3提问于2013-07-06得票数 0
回答已采纳
我正在使用HTCondor运行一个耗费大量时间(数十小时)并定期生成文件(数十分钟)的作业。我希望HTCondor在文件创建后立即将文件传输到我的提交目录中。我如何才能做到这一点呢？对于condor来说，有没有什么本机选项可以让我这样做？有没有其他方法？
我也可以尝试在创建文件时使用scp或mv，但我不知道如何手动将文件从condor传输到我的个人空间
浏览 11提问于2018-02-22得票数 0
我是秃鹰的新手。我正在用no做秃鹰的主项目。覆盆子皮。目前，我已经将两个pi连接在一个秃鹰池中；我指的是"“网站来运行一个作业。但问题是作业是在提交机器上运行的。
有人能帮我一下吗。这将是一个很大的帮助。
浏览 1提问于2016-02-25得票数 0
我有一个运行condor_submit的脚本，用于一批25个作业，condor_wait让它们全部完成，然后再为另一个批pf 25个作业运行另一个condor_submit。我想确保Normal termination (return value 127) (任何非零的返回值)前25个作业都失败了。
我怎么能轻易做到呢？或者，如果这是不可能的，我也愿意将我的工作可
浏览 3提问于2017-09-19得票数 1
回答已采纳
1回答
我正在遵循和在HTCondor网站上的教程来设置一个可分时隙。在我运行任何配置之前去找。现在，我运行下面的命令来检查一切正常并找到slot1@ip-172-31-54-214.ec2.internal未定义的1，而不是更新:重启后的，它似乎正在工作。我现在可以用不同的CPU请求发送作业，它将正确地启动它们。我要说的
浏览 11提问于2022-07-11得票数 1
1回答
我有一个HTCondor主VM，它定期接收作业，并分配在一个condor_usr1|2帐户上运行的每个作业。Win7 VM上的condor服务作为本地系统帐户运行，但是正在执行的作业实际上是作为condor_usr1|2帐户运行的。如果我作为一个Win7帐户登录到
浏览 2提问于2019-09-24得票数 2
回答已采纳
我有一个具有多个活动节点的condor集群。但是如果我想强制condor使用所有的节点呢？仅仅是为了评估运行在多个节点上的进程时间还是在单个节点上运行的进程时间？
浏览 0提问于2014-05-25得票数 1
1回答
管理分布式集群？
、、、
您有一个10TB的数据库，它均匀地分布在10个节点上，一切都运行得很顺利。您如何管理所有这些任务/工作？如何在机器之间分配任务？如何跟踪进程中的作业</e
浏览 1提问于2011-04-15得票数 5
回答已采纳
1回答
当使用condor在专用计算机集群中分发作业时，首先向群集提交作业，然后等待它们实际开始运行。取决于多种因素，它们可能在相当一段时间甚至几个小时内处于空闲状态。
假设我刚刚编译了将在作业中运行的代码。我可以通过condor提交文件提交作业。然后，我意识到我想要更改原始代码，要么是因为其中有一些bug，要么是因为我想尝试不同的参数。如果代码在作业仍处于空闲状态时完成
浏览 1提问于2020-10-13得票数 1
回答已采纳
我使用以下两个命令将我的输出传输回提交机器：output = out.txt
是否可以将输出流式传输到提交机器上的标准输出，而不是文件out.txt？
浏览 0提问于2014-08-21得票数 0
我正在尝试提交我的condor作业，但它一直给我一个错误，说：我是一个初学者，我不太确定这是什么意思。If the condor_schedd is not running, the Condor system will not be able to find an address and portPlease make sure the Condor daemons are runnin
浏览 1提问于2015-06-09得票数 2
我正在试图弄清楚我们是否应该在工作中尝试Condor或Sun Grid引擎(或者其他可能的东西)。
我们经常有很多未使用的WinXp工作站。希望我们可以使用wake-on-LAN，运行所有的作业，然后自动关闭。我们主要运行Matlab、Java或Python模拟来进行蒙特卡洛或参数探索。以我对Condor的有限了解，听起来使用vm领域可能是一种无需修改现有代码即可处理快照的便捷方法
浏览 0提问于2009-12-06得票数 5
回答已采纳
所以我有一个想要用HTCondor运行的可执行文件fit。可执行文件以整数0 <= I <= 9作为参数。我想将i关联到作业进程编号：$( process )。should_transfer_files = Yes queue 10 我的shell脚本很简单： exportaklog: All mechanisms failed to produce tokens for cell desy.de
/var&
浏览 28提问于2020-10-07得票数 1
回答已采纳
我刚刚知道如何使用在集群上的机器上发送要处理的作业。由于我们有很多机器，但并不是每台机器都配置相同，所以我想知道：
是否可以告诉秃鹰只将我的作业(python脚本)分派给安装了numpy的机器，因为我的脚本依赖于这个包？
浏览 6提问于2012-03-25得票数 12
我有一个处理数字的C/C++应用程序。它基本上是不同数据集的主循环。我们可以使用openmp和mpi访问100个节点的集群。我想加快应用程序的速度，但我是mpi和openmp的绝对新手。我只是想知道，即使性能不是最好的，最容易学习和调试的是什么。谢谢
浏览 0提问于2010-10-30得票数 5
回答已采纳
1回答
下面是gitlab运行程序的配置。目前，它根本没有删除spot船队，如果我设置了amazonec2-block-duration-minutes=20标志，我猜它会将它保持20分钟的spot实例，然后删除它。我正在寻找一种解决方案，以便在每个作业成功后删除spot实例，并且/或它可以等待某个时间等待其他作业并被终止。如果需
浏览 5提问于2021-01-20得票数 1
我正在使用Condor 7作为任务调度器(对于香草宇宙，由于对程序的限制超出了我的能力范围，所以不涉及检查点)，所以DAG看起来是一个自然的解决方案。然而，有些程序需要在同一主机上运行。我在Condor手册中找不到关于如何做到这一点的参考资料。DAG文件示例：JOB B B.condor JOB D D.<em
浏览 3提问于2010-02-26得票数 2
回答已采纳
我是Condor的新手，正在尝试在Condor上运行我的Python程序，但有一个困难。我找到的所有教程都假定使用一个文件Python程序，但是我的Python程序由多个包和文件组成，并且还使用了其他库，如numpy和scipy。在这种情况下，我如何让Condor运行我的程序？或者，有没有办法将Python源代码转移到Condor机器中，并使Python on <
浏览 8提问于2017-04-05得票数 4
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
