腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
简单
的
ray
python
示例
无法
使其
并行
执行
、
对
ray
来说还是个新手,所以请耐心等待。我创建了以下
示例
来测试
简单
图像算法
的
射线和非射线实现之间
的
时间差。为什么下面的代码不能
并行
执行
?我可以在控制面板上看到,所有内容都仅加载到一个工作进程import cv2import time class image
浏览 25
提问于2021-02-23
得票数 1
回答已采纳
3
回答
Python
线程速度出乎意料地慢
、
、
我决定学习如何在
Python
中实现多线程,并做了一个比较,看看在双核CPU上我会获得什么样
的
性能提升。我发现我
的
简单
多线程代码实际上比顺序等效代码运行得慢,我不知道为什么。我设计
的
测试是生成一个大
的
随机数列表,然后打印最大值import threading print max([random然后,我尝试从两个线程调用ox(),看看完成
的
速度有多快。我怀疑ox()正在被自动
并行</
浏览 2
提问于2010-06-26
得票数 5
回答已采纳
1
回答
使用
Ray
在GPU上运行
Python
函数
、
、
我使用一个名为
的
Python
包
并行
运行下面的
示例
。代码运行在一台有80个CPU核和4个GPU
的
机器上。通过将range(1000)更改为range(10),我修改了GPU
示例
,以减少
执行
次数。请参阅下面的修订
示例
。{values[-5:]}') 修改后
的
GPU
示例
的
输出如下:[0, 1, 4, 9
浏览 10
提问于2022-01-25
得票数 1
回答已采纳
1
回答
在
ray
.remote中同步循环
、
、
我有一个庞大
的
远程函数,它与
ray
并行
化,但在它里面,有一个循环我真的需要串行
执行
-每个迭代都要全局
执行
一次,而且只
执行
一次。因此,我
的
想法是使用一个互斥锁来同步正在
执行
的
线程 import
ray
def remote_function (): unlock (mutex)
浏览 53
提问于2020-08-12
得票数 0
4
回答
分布式
python
编程
、
我正在尝试将
python
程序
的
执行
分到两台不同
的
机器上。我想知道有没有办法从一台机器上调用另一台机器上
的
python
解释器。不在另一台机器上运行脚本,而是将
执行
任务拆分到两台机器上。在接下来
的
几个月里,我将教授我
的
自我分布式编程,我认为这将是一个很好的开始。 我认为第一步是使用一台机器调用另一台机器,并将程序
的
一部分发送给它。然后,下一步将是两台机器一起
执行
相同
的
程序,并进行通信以
浏览 2
提问于2012-09-02
得票数 3
回答已采纳
4
回答
从一个
python
文件启动多个无限
Python
进程
、
、
、
假设我有三个模块:其中,只要调用mod.launch(),它们中
的
每一个都会无限地运行。有哪些优雅
的
方法可以一次启动所有这些无限循环,而不需要等待一个循环完成后再调用另一个循环?任何形式
的
帮助都是值得感谢
的
。
浏览 0
提问于2019-02-08
得票数 0
1
回答
Tensorflow-1与低级代码和
Ray
一起分发
、
、
、
、
我正在尝试分发我使用
Ray
和Tensorflow 1构建
的
深度强化学习系统
的
训练。同时,我使用
ray
,因为我有很多代码来
并行
化与训练没有直接关系
的
逻辑,我想使用tf
并行
化训练(即在不同GPU上
的
不同工作人员之间
的
梯度减少)。我试图尽可能地遵循这个指南,以便构建一个
简单
的
示例
,该
示例
使用我在主项目中使用
的
库/API,但我
无法</e
浏览 0
提问于2021-05-27
得票数 1
1
回答
列表不会因
Ray
parallel
python
而改变
、
、
、
、
我
的
问题是,如果我重新分配列表中
的
一项,使得重新分配发生在
并行
进程期间,那么在
并行
进程完成后,更改将恢复到其原始状态。我知道
python
的
多处理包也有同样
的
问题,但问题
的
解决方法是,对您不想恢复到
的
任何东西进行“上一步”处理,并在它之前使用"manager.list()“。如何使用
RAY
并行
更改列表?非常感谢。 另外:请注意,此脚本可能会使您陷入困境,因为您可能会在
并行
进
浏览 20
提问于2020-06-17
得票数 0
1
回答
使用
ray
.serve传递用于
并行
执行
的
多个对象
、
我正在遵循
ray
文档中
的
教程。TRAINED_MODEL_PATH,config=config)下面将单个
示例
发送到后端requests.get( json={"array": s
浏览 6
提问于2021-02-25
得票数 1
回答已采纳
1
回答
基于
Ray
的
基本集群计算与数据管理
、
、
我试图使用
Ray
在不同
的
计算机上运行
并行
的
科学模拟。我希望能够在模拟中更改一个参数,并运行许多不同版本
的
相同案例来检查其影响。 我需要用修改后
的
参数复制一个模板文件。我可以在yaml文件中使用file_mounts复制原始文件。但是,除了
python
文件中
的
os.chdir之外,我找不到改变工作目录
的
方法。当使
浏览 1
提问于2019-09-05
得票数 1
回答已采纳
1
回答
并行
运行openai-gym环境
、
、
、
以下代码摘自https://bair.berkeley.edu/blog/2018/01/09/
ray
/。import gym class Simulator(object): self.env = gym.make(这段代码真的是
并行
运行
的
吗?根据我
的
理解,只有一个env,所以上面的代码应该按顺序
执行
操作,即一个接一个
浏览 37
提问于2019-01-10
得票数 3
回答已采纳
1
回答
使用
Python
的
射线模块时修改共享内存中
的
数据
、
、
目前,我正试图使用
Python
模块
并行
化
ray
代码
的
某些部分。不幸
的
是,
ray
默认不允许修改共享内存中
的
数据(至少根据我
的
理解)。这意味着我需要先
执行
一个numpy.copy(),这对我来说是非常低效
的
。这可能是一个效率很低
的
例子:import
ray
def mod_arr( arr ):
浏览 5
提问于2021-12-02
得票数 1
回答已采纳
1
回答
Python
似乎为每个远程函数调用复制对象。
、
、
、
这应该是一个
简单
的
问题。 我有一个巨大
的
数据集,我需要多次运行模拟,一遍又一遍地遍历这个数据集,只读。我想
并行
运行这些模拟,因为我不能在每个进程中加载这个数据集(它超过5GB),所以我想使用
Ray
“共享内存”功能(我也可以尝试多处理,但是
Ray
看起来更容易、更快)。下面的代码基本上是我能找到
的
大多数例子
的
副本。我见过有人说这是
Ray
的
预期用例(例如,Robert
的
答案)。因此,这是可能
的</
浏览 2
提问于2022-07-06
得票数 2
回答已采纳
4
回答
使用多处理模块进行集群计算
、
、
我对使用计算机集群运行
Python
程序很感兴趣。我过去一直在使用
Python
MPI接口,但由于编译/安装这些接口很困难,我更喜欢使用内置模块
的
解决方案,比如
Python
的
模块。我真正想做
的
是设置一个跨越整个计算机集群
的
multiprocessing.Pool实例,并运行一个Pool.map(...)。这是可能/容易做
的
事情吗?如果这是不可能
的
,我希望至少能够从一个中央脚本启动任何节点上
的
Proc
浏览 4
提问于2011-03-03
得票数 58
回答已采纳
1
回答
以编程方式使用
ray
设置进程数
、
、
我想使用
Ray
来
并行
处理
python
中
的
一些计算。作为其中
的
一部分,我想要一个方法,它以所需
的
辅助进程数作为参数。我可以找到关于
Ray
的
介绍性文章来指定顶级进程
的
数量,这与我想要
的
不同。在实例化例如多处理池对象时,是否可以指定类似于实例化
的
方法,如下面所示?使用多处理
的
示例
:
浏览 10
提问于2022-03-25
得票数 1
1
回答
装饰器函数来包装一个函数?
、
、
、
我必须编写一个伪函数来让我
的
代码在不同
的
系统上运行,其中一些系统没有所需
的
包。该函数被包装起来,然后像class-function一样被调用。我正在努力解决这个问题,有什么办法吗?这里我得到了一个简短
的
代码片段,我导入了一个应该包含这个remote()函数
的
python
脚本
ray
.py。remote函数必须接受两个参数,没有任何用法。编辑:@
ray
.remote()将run()函数包装为
并行
可
执行
的
浏览 38
提问于2020-12-29
得票数 1
1
回答
使用
Ray
实现大型程序
并行
化
的
正确方法
、
、
、
、
我有一个非常大
的
Python
程序(大约800行),它
的
结构如下: 程序是大规模
并行
的
,因为主函数
的
每次
执行
都独立于前面和下一个函数。因此,我使用
Ray
并行
地在集群中
的
多个工作节点
浏览 5
提问于2020-08-21
得票数 2
回答已采纳
4
回答
Python
:如何在
python
中运行嵌套
的
并行
进程?
、
、
我有一个交易者交易
的
数据集df。我想在Assets中
并行
计算每种资产,也想
并行
计算每种资产
的
每个交易者。在完成所有这些计算之后,我想根据smartTrader列表进行额外
的
分析。这是我第一次尝试
并行
处理,所以请耐心等待,感谢您
的
帮助。
浏览 0
提问于2015-07-22
得票数 2
4
回答
python
中
的
并行
处理
、
在
python
2.7中
执行
并行
处理
的
简单
代码是什么?我在网上找到
的
所有例子都令人费解,并且包含了不必要
的
代码。 我如何做一个
简单
的
强制整数分解程序,其中我可以在每个内核上分解1个整数(4)?我真正
的
程序可能只需要2个内核,并且需要共享信息。我知道有
并行
python
和其他库,但我希望将使用
的
库
的
数量保持在最少,因此我想使用thread和/
浏览 0
提问于2010-10-02
得票数 38
回答已采纳
2
回答
并发运行多个tensorflow会话
、
、
、
我正在尝试在一台具有64个CPU
的
CentOS 7计算机上并发运行多个TensorFlow会话。我
的
同事报告说,他可以使用以下两个代码块在他
的
机器上使用4个内核来产生
并行
加速:import numpy as npfrom PIL importmnist.py==> Time spent: 37.65 正如您所看到
的
,我使用多进程会显著
浏览 0
提问于2015-11-17
得票数 16
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
python执行简单的接口测试
伯克利AI分布式框架Ray,兼容TensorFlow、PyTorch与MXNet
Python爬虫实战,正则表达式的简单应用和示例演示!
Ray,一个分布式计算的Python库!
简单对比运行C与python3脚本的执行效率
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券