腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
2
回答
Joblib
不
能在
多核
上
运行
、
因此,我希望使用
joblib
并使我的代码并行执行。我正在使用htop观察CPU的使用情况,它似乎仍然只在一个内核
上
运行
。我寻找了一个类似的线程,然而大多数人都因为使用并行的开销而增加了
运行
时间。但在我的例子中,它似乎根本没有使用并行。
浏览 53
提问于2021-09-07
得票数 -1
回答已采纳
1
回答
joblib
是否需要
多核
来进行多处理?
、
、
、
我使用
joblib
并行处理4帧(从视频拍摄的图像)。为此使用了并行for循环,其中每个循环为不同的帧调用相同的函数。由于捕获帧只占用总处理时间的1%(通过使用line profiler的python脚本分析发现),因此我首先捕获4个帧,然后将其移交给
joblib
进行多处理。在Rapberry pi-2 (四核)
上
,观察到了几乎8倍的加速,在Beaglebone Black (不是
多核
)
上
,也观察到了近7倍的加速。那么,
joblib
到底是如何分配任务的呢?
浏览 1
提问于2015-05-01
得票数 1
2
回答
为什么绿色线程不
能在
多个核心上工作?
、
在维基百科
上
:被描述为通常不
能在
多核
上
运行
,而不解释原因。 我知道本机线程可以由操作系统分配给
多核
。有人能解释为什么绿色线程不
能在
多核
上
运行
吗?是因为绿色线程是从本机线程派生/生成的,所以它们不能从本机线程
上
移动到另一个线程?
浏览 13
提问于2013-06-06
得票数 6
回答已采纳
1
回答
单个节点处理程序会在
多核
容器
上
获得任何性能吗?
我知道Node.js应用程序
运行
在单个线程
上
,但主要是将异步操作(例如I/O)交给操作系统,操作系统可以在多个线程中
运行
。 我的问题是,这些多线程操作也
能在
多核
上
运行
吗?如果是这样的话,这是否意味着我仍然可以通过在
多核
容器
上
运行
单个节点进程来获得性能?在
多核
容器
上
运行
单个节点应用程序有什么优点吗?
浏览 0
提问于2021-07-17
得票数 0
回答已采纳
1
回答
C# BackgroundWorker能否在非
多核
CPU
上
运行
?
、
、
我的问题是,它
能在
没有
多核
处理器的计算机上工作(BackgroundWorker)吗? 或者BackgroundWorker只
能在
多核
处理器
上
运行
?
浏览 1
提问于2012-12-08
得票数 0
回答已采纳
1
回答
蒙特卡罗模拟中的For循环优化
我正在用Nataf变换做一个相关的多元模拟。我用Python (中间知识)开发了一个代码来执行Monte模拟,但是它在我的计算机上花费了很多时间。有人能帮我优化这些线路吗?loc_exp = 15.0loc_gam = 0.72698 # Generate standarn n
浏览 0
提问于2017-10-29
得票数 1
回答已采纳
2
回答
Dart会在
多核
环境中并行执行隔离吗?
、
、
、
问题背景不过,我找不到这方面的任何信息,所以我的问题很简陋。
浏览 5
提问于2012-07-06
得票数 21
回答已采纳
1
回答
多核
中并发性和并行性的区别?
、
、
、
我知道并行性和并发性之间的区别,但是想知道更多关于
多核
并发的知识吗?多个线程
能在
多个核
上
并发
运行
吗?
浏览 4
提问于2021-05-26
得票数 0
2
回答
TypeError:导入sklearn时需要一个整数(got类型字节)
、
、
13 from .class_weight import compute_class_weight, compute_sample_weight 20 from
joblib
import parallel_backend, register_parallel_backend---> 22 from ..externals import
joblib
23
浏览 3
提问于2020-12-01
得票数 1
1
回答
芹菜中的工作进程
、
我有一个CPU密集型芹菜任务,在其中一个任务中,可以使用
joblib
进一步并行化。我的问题是,使用这种配置,是否意味着每个工作进程将只有一个核心可用,并且不会从
joblib
的并行化中受益?或者,当worker的队列中没有其他任务时,它将使用所有核心。
浏览 23
提问于2019-09-26
得票数 4
2
回答
为什么Javac不
能在
多核
上
运行
?
、
、
、
、
这个问题看起来很普通,但是javac不能并发编译的技术原因是什么呢?我读到eclipse编译器是并行的,为什么javac不是呢?
浏览 0
提问于2017-09-28
得票数 2
1
回答
Python并行化错误的多处理--“函数的对象不可迭代”
、
、
、
、
我们的数据中心有NVIDIA Tesla K80 GPU加速器计算,具有以下特点:在Linux64位下
运行
Intel(R) Xeon(R) CPU E5-2670 v3 @2.30GHz, 48 CPU我正在
运行
下面的代码,它在垂直地将不同的数据集附加到一个RandomForestRegressor模型的单个数据系列之后执行RandomForestRegressor。from
joblib
import Parallel, delayedimport sysimport
浏览 4
提问于2017-08-14
得票数 0
回答已采纳
2
回答
在
多核
cpu中内核线程和用户线程之间的区别?
、
、
、
我想澄清一下我对
多核
环境中内核线程和用户线程的理解。因此,无论是python还是node
浏览 3
提问于2020-01-05
得票数 3
回答已采纳
1
回答
预先训练过的XGBoost模型如果从文件加载,则不会再现结果。
、
、
、
在同一会话中,从文件加载的模型很好地在验证集
上
再现结果。但是,如果会话结束,我从零开始连接到Colab,来自同一个文件的同一个模型在相同的验证集
上
显示出更糟糕的结果,并且需要重新训练才能被复制。尝试了三种不同的方式来保存和加载模型:xgb_model.save_model('xgb_native_save.model')
joblib
.dump(xgb_model, 'xgb_
joblib
.model')with ope
浏览 5
提问于2022-07-24
得票数 0
1
回答
android设备
上
的并行应用
、
、
我
能在
多核
android手机上编写一个并行应用程序吗?我试图将应用程序划分为线程,并在内核
上
运行
每个线程,以加快应用程序的速度。我能控制内核
上
的线程分布吗?
浏览 0
提问于2013-01-25
得票数 1
2
回答
序列化没有文件系统的Python对象
、
、
、
我看到的pickle和
joblib
dump是两种常见的方法,而
joblib
是更好的方法。有没有可
能在
不
访问任何文件系统的情况下序列化对象?
浏览 16
提问于2020-07-30
得票数 0
回答已采纳
2
回答
如何让Java使用机器
上
所有的CPU能力?
、
我有时用Java编写代码,我注意到有时它在
多核
机器
上
使用超过100%的CPU。我现在在一台有33个CPU(亚马逊的EC2)的
多核
机器
上
运行
一些代码,我想让我的Java进程使用所有可用的CPU,这样它就会有非常高的机器利用率。我
不
希望将代码更改为使用多线程。
浏览 4
提问于2012-04-08
得票数 3
回答已采纳
4
回答
检测windows
上
的内核数量
、
、
如果我在linux或mac
上
运行
R,我可以使用multicore:::detectCores()检测可用内核的数量。但是,没有windows版本的
多核
函数,所以我不
能在
windows
上
使用这个技术。
浏览 0
提问于2011-06-18
得票数 14
回答已采纳
2
回答
两个进程
能在
一台单核CPU机器
上
以完全相同的时间
运行
相同的方法吗?
、
我知道我们应该设计一个多线程应用程序,假设它可以在
多核
CPU
上
运行
。为了获得知识,我想知道两个进程是否有可
能在
单核CPU机器
上
同时
运行
相同的方法。
浏览 2
提问于2022-09-25
得票数 0
回答已采纳
2
回答
如何在python
joblib
中写入共享变量
、
、
、
import networkx as nx;from
joblib
import Parallel, delayed;我认为问题在于每个工作者都创建了自己的numpy_array对象副本,而在main函数中创建的副本并没有更新。
浏览 2
提问于2017-10-10
得票数 23
回答已采纳
点击加载更多
相关
资讯
PCSX2模拟器能在PC上运行所有PS2游戏了,除了某个奇葩
能在笔记本上运行、支持18种编程语言的AI编程模型:Stable Code 3B(Stability AI推出)
Mistral AI 发布 Devstral——一款能在笔记本上运行的强大新型开源软件工程代理模型
并非育碧所有PS4游戏,都可以在PS5上运行,八款游戏不兼容
用 Joblib 加速机器学习:高效存储与加载大数据!
热门
标签
更多标签
云服务器
ICP备案
云直播
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券