1回答
任务管理器并行计算
、、、
我需要在python中运行一些并行计算。我能想到的唯一兼容的方法是多进程/叉子模型，由于以下几个原因，这个模型不太理想：
任务管理器负责调度和限制并发任务的数量。等待其他任务</e
浏览 4提问于2016-05-09得票数 3
2回答
Python的futures包允许我们享受并行执行任务的ThreadPoolExecutor和ProcessPoolExecutor。但是，对于调试，有时用虚拟并行临时替换真正的并行是有用的，虚拟并行在主线程中以串行方式执行任务，而不会产生任何线程或进程。
有没有DummyExecutor的实现？
浏览 2提问于2012-05-03得票数 19
回答已采纳
我想从用户的角度理解JuliaPython1.3和Python3在多线程编程模型方面的差异。一个比另一个更实用/提供更高层次的功能吗？
一种比另一种更灵活(例如，它可以适用于更广泛的一组案件)？
浏览 1提问于2020-01-20得票数 6
回答已采纳
1回答
从日志文件中提取数据
、、、
最初，我打算用Python来完成这个任务。后来，我开始考虑如何最快地完成这项任务。这就引出了并行编程。我记得在某个地方听说Python不可能是真正的并行。到目前为止，我是一个专业的程序员。我已经用Java玩了一段时间了，我正在考虑用Java进行并行编程来执行这个任务。我想知道什么是完成这项任务最快的方法？
浏览 0提问于2014-01-17得票数 -1
回答已采纳
2回答
二叉树的并行编程
、、、、
我对python和并行编程非常陌生。我有一棵像这样的二叉树：
我的任务是对每个节点进行平方并替换节点中的值，但是必须在父节点之前对子节点进行平方(即所有子任务都应该在父任务之前执行-- 4,5,6和7将首先使用线程被平方，然后是2和3 )，并且所有相同级别的节点都应该并行地执行平方任务。如何并行地将此函数应用于每个节点？同时，我的意思是使用python的多处理方面。
浏览 1提问于2016-06-20得票数 1
回答已采纳
介绍了多线程和多线程处理，但它没有说明什么是一般有效的，还是只在Python环境中有效。例如，它说：
并发性既包括多处理(适合于CPU绑定任务)，也包括线程(适合于IO绑定任务)。为什么多线程一般不适合于CPU绑定任务和IO绑定任务的多处理？AFAIK和AFAIK都可以有效地用于这两项任务。两者之间的决定取决于其他条件，例如任务粒度、共享状态的数量和任务之间的执行顺序依赖，以及进程/线程创建成本(对于进程来说，特别是在某些OSes中)。上面
浏览 2提问于2020-03-03得票数 4
1回答
同时使用多处理和GNU并行？
、、、、
我有一个Python脚本，它目前正在使用多处理并行执行任务。我的顾问建议我使用GNU并行来加快速度，因为Python程序总是在单个内核上执行。我应该保持多处理脚本的原样，并在上面使用GNU并行吗？还是应该删除多处理部分，然后使用GNU并行？有什么不同吗？
浏览 7提问于2022-04-09得票数 1
回答已采纳
我必须确定哪个处理器忙，并将任务发送到不忙的处理器。我必须使用并行python执行程序，但我还必须确定将任务发送到哪个服务器。有没有人不知道我应该在并行处理代码上使用什么样的条件？它是用python编写的，调用PP
浏览 1提问于2013-02-20得票数 0
2回答
我知道，通过使用-P开关或@parallel标记，我可以在多台主机上并行运行任务。我试图在同一台主机上并行执行多个长期运行的任务：def task1():def task2():def backup_all(): execute(task2)如何使用fabric在同一主机上并行启动我知道我可
浏览 3提问于2014-03-27得票数 7
回答已采纳
1回答
我目前正在进行一个java项目，可以在几个GPU上运行python任务(小型机器学习任务)。Java应该接受一个任务并尝试将其并行化。我知道我可以使用OpenCL\CUDA在GPU上执行任务，我可以使用几个库来运行Java中的Python代码。我现在看到的唯一方法就是使用PyCUDA编写Python代码，然后在Java语言中运行它。但我不确定是否有可能通过Java在GPU上并行Python代码。
浏览 6提问于2018-03-16得票数 0
我正在编写一个从网站下载数据的程序(eve-central.com)。当我发送带有一些参数的GET请求时，它返回xml。问题是，我需要发出大约7080个这样的请求，因为我不能不止一次指定typeid参数。 import xmltodict, urllib3 for typeid in typeid
浏览 3提问于2015-03-02得票数 1
回答已采纳
我使用的是python3，在其中，我使用rpy2包访问R，传入完成繁重计算的R代码，并将结果返回给python。特别是，我正在使用R (documentation )的lfe函数。我想知道哪个选项更好:在python中进行并行化还是在R中进行并行化，这有关系吗？为什么我们要怀疑其中一个比另一个更有效呢？谢谢。
浏览 18提问于2017-02-03得票数 1
回答已采纳
我对使用distributed python库非常陌生。我有4名工作人员，我已经成功地启动了一些并行运行，为每个工作人员使用了14个内核(在现有的16个可用内核中)，从而导致4*14=56任务并行运行。但是，如果我想让每个工人同时完成一项任务的话，该如何进行呢？通过这种方式，我期望在工作人员上并行使用14个核来完成一项任务。
浏览 3提问于2017-07-12得票数 5
回答已采纳
2回答
大多数情况下，并发任务很容易并行化。在语言中，使用goroutines执行并行任务是很容易的。有没有办法在Python中做同样的事情，例如使用协程来创建进程并同步它们？
浏览 5提问于2011-06-30得票数 5
回答已采纳
我试图使用多线程和/或多重处理来在某种程度上加快我的脚本速度。本质上，我有一个从CSV中读取的10,000个子网的列表，我想将这些子网转换成IPv4对象，然后存储在数组中。aclsConverted = [] aclsConverted.append(ipaddress.ip_network(ip))
convertToIP(y['srcSubnet'])
如果我尝试使用concurrent.futures线程，它可以工作，但速度是3-
浏览 1提问于2019-11-06得票数 6
我不想使用python编程方法，这是非常耗时的。我想使用某种分布式并行处理来完成这项任务。我想做下面的事
将文件名和内容(提取的文本)存储在dataframe中。我已经使用普通的python脚本完成了上面的任务。但是我想使用Spark/pySpark来执行上面的任务。我从来没有使用过星火，所以需要一些指导，什么可能是
浏览 1提问于2019-04-26得票数 0
1回答
我正在运行一个脚本，该脚本启动了几个任务： taskqueue.add(url='/example',params={'num': i})
据我所知，这些任务是并行运行的。有没有什么方法可以让AppEngine在我刚插入队列的所有任务都完成之后运行一个特定的任务/python文件？我想发送一个标志给在上一次循环迭代中调用的任务，但如果任务
浏览 3提问于2010-11-19得票数 5
回答已采纳
1回答
我的任务是实现具有并行状态的HFSM，以及在Python中转换到多个并行状态的能力。不幸的是，我找不到支持这一点的库。我被告知去调查卡蒙达。我很难理解并行HFSM与Camunda之间的关系？有没有办法在Camunda中实现并行的HFSM？
浏览 32提问于2021-09-14得票数 2
回答已采纳
5回答
Python中的并行性
、、、
在Python中实现并行性的选择是什么？我想在一些非常大的栅格上执行一些CPU绑定计算，并希望并行化它们。来自C背景，我熟悉三种并行处理方法：
在Python中，有哪些方法可用，它们的特点是什么？实现共享内存并行的首选方法是什么？我听过有人提到GIL的问题，也
浏览 11提问于2010-06-07得票数 26
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
