我正在寻找一个开源的资源管理器，可以在分布式计算环境中管理大规模的工作流。我觉得Ganglia和Nagios在高性能计算环境中很好。但是我想知道Ganglia和Nagios是否可以用于工作流？能否将我的调度算法嵌入到调度器中，并将其与Hadoop MapReduce框架上的资源管理器一起使用？有帮助的回复更受欢迎。谢谢。
浏览 0提问于2011-12-13得票数 1
回答已采纳
我在一台高性能计算机上反演非常大的矩阵。显然，这有很高的RAM要求。为了避免内存不足的错误，作为临时解决方案，我刚刚请求了大量内存(TBs)。如何从输入矩阵大小预测所需内存，以便使用numpy.linalg.inv来更有效地运行高性能HPC作业？
浏览 16提问于2022-01-17得票数 3
回答已采纳
与基于“普通”( windows /samba)的文件服务器相比，某些操作确实会损害系统，例如使用windows资源管理器列出一个包含几千个文件的文件夹。无论如何，现在假设您有一个大的文件系统层次结构，并且许多用户使用CIFS，给系统带来压力，有效地“击倒了它”。
扩展/提高性能的建议方法是什么？
浏览 1提问于2012-02-11得票数 4
2回答
是否有任何Scala用于高性能的矢量化计算，如numpy中的Python？例如，在总结两个(非常大的) Array时，
vect.sum( Array(1,2,3,...), Array(10,11,12,...) ) == Array(11,13,15,...)
浏览 3提问于2015-10-01得票数 1
回答已采纳
我有一个关于在React项目中使用AssemblyScript的问题，我已经读过一些关于使用AssemblyScript来提高性能的文章，但是问题是，当我的项目不是那么大的东西，比如游戏或机器学习等等，当我有一个较少的计算项目时，是否可以使用AssemblyScript来提高性能以获得更好的用户体验？
浏览 6提问于2022-07-03得票数 0
我有一个大的data.frame (>4M行)，其中一个列包含字符串。我想在每个文本字段(例如gsub)上执行几个字符串操作/匹配正则表达式。我听说过几个包(bigmemory，ff)，并发现了关于R 的高性能/并行计算的概述。或者知道一个解释如何应用标准R字符串函数的源(gsub，..)这些“高性能计算软件包”创建的“对
浏览 1提问于2013-11-04得票数 1
回答已采纳
1回答
例如，在sklearn.cross_validation.cross_val_score中，您只需在n_jobs参数中传递所需的计算作业数。而对于拥有多核处理器的PC来说，它将工作得非常好。但是，如果我想在高性能集群中使用这样的选项(安装了OpenMPI包并使用SLURM进行资源管理)？如我所知，sklearn使用joblib进行并行化，而后者使用multiprocessing。我能否仅使用sklearn和n_jobs参数将mpirun函数的计算扩展到几个计算节点上？
浏览 8提问于2016-07-26得票数 44
1回答
嗨，我在我的应用程序中进行了大量的计算，因为我调用了至少2000倍的NSLog语句，这是一个11MB的大应用程序。我正在考虑将其从我的应用程序中删除，以提高性能。我的想法是正确的吗？
浏览 0提问于2013-02-01得票数 4
回答已采纳
1回答
我最近写了一些科学软件，可以从命令行运行，现在正在为该软件创建一个网络前端，以使那些对终端不那么了解的科学家更容易访问它。实现前端很简单，但在后端，我希望确保没有太多请求一次执行(这会使服务器陷入困境)。几年前，我遇到了这个问题(当时我的经验要少得多)，我简单地将一个基于Perl脚本、MySQL和crontab的解决方案合并在一起。对于这个新系统，我需要类似的功能，但我很难相信至少没有一个成熟的开源解决方案。谢谢!
浏览 0提问于2012-02-22得票数 3
回答已采纳
在javascript中操作大整数的一般原则是什么？就像在bigint的库中一样？我自己是怎么做到的？
浏览 1提问于2010-08-27得票数 4
1回答
我做的一些处理包括通过一些计算将大表连接到大表，或者向基本数据集添加额外的列。我通常将数据放入我自己的模式中进行计算，但是仓库处理能力有限，一些查询需要很长时间，因为大多数工作涉及影响或将数据连接到表的所有行( explain计划上的大量全表扫描！)。如果没有，有没有其他方法可以在这些情况下提高性能？
浏览 3提问于2013-06-11得票数 0
我正在实现某种类型的文件查看器/文件资源管理器作为Web应用程序。因此，我需要从系统的硬盘中读取文件。当然，我必须处理小文件和大文件，我希望以最快和最高性能的方式做到这一点。现在我有了下面的代码，我想问问那些对高效读取(大)文件有很多知识的“大个子”们，看看我这样做的方式是否正确：
RandomAccessFile fis = new RandomAccessFile(filename
浏览 10提问于2018-09-08得票数 0
我是一个新手，需要这方面的信息，所以我可以使用Fargate成本计算器，看看我们将从ECS迁移得到多少节省。法门成本计算器在这里：
我有18个实例正在运行，5个c5大，8t2.micro，3t2.media，2t3.media。我只是不知道在控制台上单击此信息后，通过成本资源管理器和主控制台页面。
浏览 0提问于2018-09-26得票数 0
回答已采纳
我在大学的高性能计算中心使用集群，他们使用SGE系统进行工作管理。您可能知道，默认情况下，SGE将输出两个文件：NAME.oXXXXX和NAME.poXXXXX。通常我的模拟需要几周时间，而NAME.oXXXXX文件会变得非常大，就像几千兆字节，所以我有点担心这么大的文件会减慢我的模拟速度。
有没有人有经验，如果有，该如何关掉。
浏览 0提问于2012-06-12得票数 0
我正在尝试制作多个UIView的堆栈，每个UIView都有一个阴影，轻微的旋转和缩放。作为测试，我创建了10个视图的10个堆栈。绘制所有这些都非常慢..有没有优化这一点的好方法？我试着从图像中制作阴影和背景，但这很难看，而且同样很慢。我把这些堆栈放在一个UIScrollView中
UIView *stack = [[UIView alloc] initWithFrame:CGRectMake((i * 106), (k * 106
浏览 0提问于2013-05-24得票数 1
我正在做一个应用程序，它可以计算一个大的品牌/域名列表，并检测预先确定的关键字的变化。linkedIn vs linkedln.com我想知道，如果只是为了比较两个字符串并检测细微的变化，这两种算法是否都能满足目的，所以除非是为了提高性能
浏览 10提问于2020-05-09得票数 4
但是，对于大目录，性能是不可接受的。它比Windows资源管理器目录属性计算的大小更长，并且会导致硬盘发出更大的响声。那么，我该如何优化这个过程呢？有没有合适的WinAPI函数或方法来实现这一点？
浏览 0提问于2014-09-28得票数 0
1回答
最小化向量索引开销
、、、、
我有一个矢量化函数，它计算到一大组点的距离。为了提高性能，我仅通过选择必要的点数来限制点数。当我绘制所需的计算时间时，我可以看到，当索引部分超过数据的75%时，它实际上需要更多的时间。我能做些什么来克服这一点，或者把性能增益推到%85？
浏览 0提问于2012-02-24得票数 8
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
