腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
python
多
进程
池
运行
较慢
?
、
、
、
我正在学习用于数值计算的
python
多处理,这里是我实现的示例代码,我猜问题应该是对map参数的错误使用。
浏览 62
提问于2019-10-15
得票数 1
2
回答
生成无限多个工作
进程
的
池
、
、
我正在使用networkx (网络分析库)进行一些速度
较慢
的计算,并尝试使用
池
工作器来使其更快一些。这些计算是独立的,因此应该相对简单地将它们并行化。slow_function(k,G)现在,我在控制台中
运行
了以下命令:我希望这段代码创建4个
进程
,并在不同的
进程
中用num_
浏览 1
提问于2013-03-02
得票数 2
回答已采纳
2
回答
Python
中的并行数据处理
、
目前,代码
运行
良好,但从队列中依次提取url、将其发送到相应的类、下载url内容并最终处理它都是缓慢的。例如,如果它能够从队列中读取n urls,然后拍摄n
进程
或线程来处理下载和处理,则会更快和更好地利用资源。 可以使用什么包来解决这个问题?
浏览 1
提问于2013-07-31
得票数 1
回答已采纳
1
回答
使用多处理时,格式化大量图像所需的时间较长
、
、
、
、
我目前正在处理15k的图像,但这个数字可能会在某个时候增长到更多。我写了一个函数,可以对图像进行几次更改,比如将它们转换为黑白,裁剪,调整大小,然后将它们展平。稍后,我会将格式化后的图像保存到csv文件中,以便稍后与tensorflow一起使用。我正在使用多处理模块来利用我CPU上的更多内核。似乎使用多处理比使用for循环一次编辑单个图像需要更长的时间。我还编写了同一个程序的一个简单版本,可以对一系列数字进行平方运算。对此使用多处理实际上更快。 我把数据分成批次会不会更好?我写了一个生成器来给我不同的批处理,但我不能让多处理与它一起工作。 比较使用多处理与顺序函数调用格式化图像的时间
浏览 14
提问于2019-02-04
得票数 0
1
回答
为什么
池
比相同数量的
进程
慢
、
、
最近,我尝试将一些并行
进程
重构到一个池中,但奇怪的是,这个
池
花费的时间几乎是纯
进程
的两倍。请假设它们
运行
在同一台具有相同数量核心的机器上。我希望有人能解释一下为什么我使用
池
的实现要花更长的时间,也许可以给出一些建议:下面是使用Process的更快实现更新重构以控制与
池
实现相同的活动
进程
数量,速度更快:pipes = [] def _get_par
浏览 2
提问于2017-11-20
得票数 0
回答已采纳
1
回答
IIS
进程
回收
、
、
、
、
我读过,它提到了一些关于IIS
进程
回收的内容,结果是
多
实例的出现:在
多
实例中,一个
进程
的两个或多个实例同时
运行
.根据应用程序
池
的配置方式,可以
运行
一个工作
进程
的多个实例,每个实例可能加载和
运行
相同的应用程序代码重叠循环的出现是
多
实例的一个例子,就像Web花园
浏览 2
提问于2012-11-02
得票数 0
回答已采纳
8
回答
Python
进程
池
不是守护
进程
?
、
、
可以创建一个非守护
进程
的
python
池
吗?我希望一个
池
能够调用内部有另一个
池
的函数。AssertionError: daemonic processes are not allowed to have children 例如,考虑这样一个场景:function_a有一个
运行
function_b的
池
,而这个
池
又有一个
运行
function
浏览 1
提问于2011-08-08
得票数 122
回答已采纳
1
回答
理解
python
中的DB连接
池
、
、
、
、
我不确定我是否理解
python
中DB连接
池
的用例(例如:心理学、2、
池
和mysql.connector.pooling)。在我看来,在
python
中,由于GIL,通常使用多
进程
而不是多线程方法来实现并行性,而在多
进程
情况下,这些
池
并不十分有用,因为每个
进程
都将初始化自己的
池
,并且一次只
运行
一个线程。这是正确的吗?在使用多个
进程
时,是否存在共享DB连接
池
的策略,如果没有,
池<
浏览 3
提问于2014-10-08
得票数 6
回答已采纳
1
回答
与非
池
进程
相比,
池
化
进程
速度
较慢
、
、
、
我是
python
的新手,我正在尝试对我的一个应用程序使用多
进程
。我实际上有一个非常简单的乘法程序,我试图异步地生成并行
进程
来计算一系列数字的乘法。当我尝试在不使用
池
化的情况下做到这一点时,时间至少要快两倍甚至四倍。我不确定这种行为的原因是什么。Non-Pool.py return x*x st = time.time()
浏览 4
提问于2013-08-03
得票数 1
1
回答
如何在不同的
python
进程
之间共享一个dict?
、
、
、
我有两个独立的
python
进程
在linux服务器上
运行
,p1和p2,如何从p2读取p1的字典?两个
进程
是独立的,所以我不能使用基于多
进程
的方法,而且由于性能
较慢
,我不想使用套接字通信或基于文件的方法。我的
python
版本是3.5.1
浏览 2
提问于2016-07-18
得票数 2
1
回答
回收工作
进程
对WCF服务的影响
、
、
、
我想知道回收工作
进程
(IIS V6.0)对托管在IIS中的WCF服务有什么影响(在性能、可用性等方面),我还想知道是否有关于如何配置回收时间或请求数量的最佳实践。我还想知道被回收的工作
进程
是否与其实例化配置设置为Single的服务有关,是否必须在每个工作
进程
回收后再次实例化它? 谢谢!
浏览 0
提问于2010-11-16
得票数 2
回答已采纳
2
回答
multiprocessing.Pool生成的
进程
比仅在Google上请求的
进程
更多
、
、
我使用
Python
的multiprocessing.Pool类在
进程
之间分发任务。=3.4)上
运行
它时,它就像预期的那样工作。生成N个
进程
,每个复杂对象在每个
进程
之间分配任务。然而,当我在另一台机器(
运行
Ubuntu,
Python
=3.5的Google实例)上
运行
它时,它产生了大量的
进程
(>> N),整个程序由于争用而停止
运行
。再说一遍,在使用htop的实际活动中,我看到许多
进程
(每个对
浏览 5
提问于2017-11-16
得票数 12
2
回答
用于并行处理的ThreadPool和
池
、
、
、
有没有一种方法可以在
Python
语言中同时使用ThreadPool和Pool,通过指定您希望使用的CPU和核心的数量来并行化循环?
浏览 0
提问于2018-07-31
得票数 0
3
回答
禁用IIS重叠回收的优缺点
、
、
我想象一下,当有人正在向已发布的when服务发出请求,并回收
池
时,调用会立即中断,并出现异常。我确定?
浏览 16
提问于2014-10-16
得票数 5
1
回答
如何在Twisted中生成长时间
运行
的
进程
、
、
前言 我正在编写一个web服务器,它允许用户访问一些用C编写的程序(我在这个C程序上使用
Python
包装器,它是)。因此,为了解决这个设计问题,我想编写一个Twisted TCP服务器,它就像一个长时间
运行
的
进程
池
。每个长时间
运行
的
进程
都是一个小的Twisted TCP服务器,可以访问C程序的一个副本。例如,用户要求
池
服务器为他保留一个长时间
运行
的
进程
,然后
池
服务器创建并
运行
一个开始监听某个端口的长
浏览 2
提问于2011-08-27
得票数 0
回答已采纳
1
回答
带gui-取消
进程
的多处理
、
、
、
、
我正在编写
python
中的gui,其目的基本上是以不同的方式处理数据。我已经想出了如何添加一个按钮并将其与特定的
运行
相关联,但我还没有想出如何实际停止流程。我使用
python
multiprocessing来启动不同的任务,因为这也允许我们最大限度地利用机器的资源。我也看过multiprocessing.active_childr
浏览 3
提问于2021-02-22
得票数 0
1
回答
如何在多处理中使用烧瓶
、
、
port=4000, threaded=False) 在这里,do_task_a、do_task_b、do_task_c是完全独立的子任务,我知道我可以使用multiprocessing.Process创建
进程
来完成这三个子任务
浏览 10
提问于2022-11-27
得票数 -1
2
回答
如何在
Python
多处理池中
运行
清理代码?
、
我有一些
Python
代码(在Windows上),它们使用多
进程
模块来
运行
一个工作
进程
池
。每个工作
进程
都需要在map_async方法结束时进行一些清理。 有人知道怎么做吗?
浏览 1
提问于2011-05-21
得票数 7
2
回答
实现与gevent兼容的工作
进程
池
的最佳方法是什么?
、
、
、
、
场景向许多客户端提供更改可能会导致处理后端发送的更改的延迟,因此我的计划是将服务器划分为多个
进程
。许多工作
进程
将为Web客户端服务,而
浏览 2
提问于2011-03-19
得票数 2
回答已采纳
2
回答
使用ThreadPool
Python
时的最大
池
大小
、
我正在使用ThreadPool来实现多
进程
。使用多处理时,
池
大小限制应等于CPU核心数。我的问题是,当使用ThreadPool时,
池
的大小限制是否应该是CPU核心的数量?all_my_urls] pool.apply_async(obj.func1, ()) pool.join() 最大
池
大小应该是多少
浏览 90
提问于2017-03-02
得票数 4
回答已采纳
点击加载更多
相关
资讯
Python进程和进程池
Python 并发编程之线程池/进程池
python之multiprocessing,Process,进程池,进程通信
Python的Socket知识8:进程、数据共享、进程池
Python单进程间通讯及进程池之间通讯
热门
标签
更多标签
云服务器
ICP备案
云直播
腾讯会议
实时音视频
活动推荐
运营活动
广告
关闭
领券