在多GPU上使用NDArray Scatter_nd的MXNet

文章/答案/技术大牛

发布

1回答

deep-learning、pytorch、mxnet、numpy-ndarray

当我使用多个gpu在MXNet(CUDA8.0+cudnn7)上训练时，我首先在不同的上下文上初始化参数，然后在不同的上下文上执行scatter_nd，第一次散射nd可以很好地工作，但在第二块GPU卡上计算时，我得到了 F1217 23:53:01.012707 2619 stream_gpu-inl.h:62]检查失败:E == cudaSuccess CUDA

浏览 21提问于2018-12-17得票数 0

1回答

使用带有python包bert_embeddings和mxnet的GPU失败

python、deep-learning、anaconda、python-import、mxnet

我正在使用下面的代码来启用GPU，它使用bert_embeddings包的mxnet包来提取Bert嵌入： from bert_embedding import BertEmbeddingctx = mx.gpu() bert_embedding = BertEmbedding(ctx=ctx) 由此产生的错误如下： MXNetError: [13:51:52] src/ndarray

浏览 46提问于2019-06-04得票数 1

回答已采纳

1回答

线性回归的mxnet梯度下降，变量类型误差

python-3.x、gradient-descent、mxnet

我试图为线性回归实现一个简单的梯度下降。 return theta, Loss main()错误消息是:参数a必须具有NDArray类型，但得到1. -5.05358

浏览 4提问于2019-09-19得票数 0

回答已采纳

1回答

运行mxnet cpu推断时内存泄漏

python、mxnet

我测试了100张照片，下面列出了对memory_profiler的分析。为什么308行会导致大量的内存增长？mxnet==1.5.1=======================================

浏览 0提问于2019-10-12得票数 0

回答已采纳

1回答

mxnet标准安装错误

16.04、cuda

我想配置config.mk文件以使用cuda。/ndarray_function_gpu.o src/ndarray/ndarray_function.cu >build/src/ndarray/ndarray_function_gpu.d/cuda: Permission denied Makefile:184: recipe for target 'bui

浏览 0提问于2016-11-18得票数 1

回答已采纳

1回答

GPU：[15:25:07] C:\Jenkins\workspace\mxnet-tag\mxnet\src\storage\storage.cc:137:使用USE_CUDA=1编译以启用MXNetError使用

jupyter、mxnet

我试着用jupyter .But的图形处理器来训练我的代码，我没有得到正确的图形处理器。a = nd.array([1, 2, 3], ctx=mx.gpu())MXNetError Traceback()) d:\data\python

浏览 0提问于2019-01-11得票数 2

1回答

使用MXNet NDArray进行梯度下降

optimization、multidimensional-array、mxnet

我正在尝试使用MXNet来做一些约束优化，这不是前馈网络中的反向传播，而是涉及类似的计算，大型数组的乘积，一些梯度下降，等等。例如，当M在正交矩阵集上变化时，为了最小化M-2*Id的踪迹，我可以使用numpy和scipy通过向量化矩阵来实现这一点，如下所示：from scipy.optimize), constraints=cons, ... method='SLSQP', options={'

浏览 9提问于2017-07-18得票数 1

1回答

稀疏矩阵的MXNet -点积

python-3.x、numpy、recommendation-engine、tf-idf、mxnet

我正在使用MXNet构建内容推荐模型。尽管是10K行，但MXNet中的CPU和GPU上下文会引发内存不足问题。当前代码如下。english")mx_tfidf = mx.nd.array(tfidf_matrix，ctx=mx.gpu()) 内存不足的错误发生在这里。cosine_similarities = mx.ndarray</

浏览 0提问于2018-09-17得票数 0

回答已采纳

2回答

为什么我的CPU做矩阵运算比GPU快呢？

machine-learning、deep-learning、gpu、mxnet

当我试图验证GPU在CPU上执行矩阵操作时，根据我的经验结果，我得到了意外的results.CPU比GPU更好的性能，这让我感到困惑。我用cpu和gpu做矩阵乘法，respectively.Programming环境是MXNet和CODA-10.1.与gpu：from mxnet import nd x = nd.random.normal(

浏览 3提问于2020-07-09得票数 1

回答已采纳

2回答

在mxnet中有关于multiplecpu的概念吗？

mxnet

我们知道，在mxnet中有关于-gpu的概念，当我们在command.And中指定gpu时，如果我们不指定gpu，它将在cpu.How上运行，它运行的cpu多吗?可以指定多个cpu吗？

浏览 0提问于2016-06-01得票数 3

2回答

如何将一维ndarray列表转换为二维ndarray* (mxnet *ndarray)

python、numpy、mxnet、numpy-ndarray

在这个例子中，我有一个长度为9的一维ndarray列表，这个列表有9个元素，每个元素都有shape=(2048,)，所以完全是9 * (2048,)，我从mxnet获得了这些ndarray，所以每个ndarray都是<NDArray 2048 @cpu(0)>数组dtype=numpy.float32。如果我使用np.asarray来转换这个列表，它将成为以下结果 shape=<class 'tuple'>: (9, 2048

浏览 0提问于2018-09-01得票数 2

回答已采纳

1回答

Mxnet -慢速阵列复制到GPU

python、performance、gpu、mxnet

我的问题:我应该如何在mxnet中执行快速矩阵乘法？我创建随机数组，将它们复制到上下文中，然后相乘。import mxnet as mxnd.waital

浏览 24提问于2019-07-30得票数 2

回答已采纳

1回答

避免在numpy和mxnet之间的数组转换过程中复制

python、numpy、multidimensional-array、copy、mxnet

我想在我的数据处理管道中减少一个内存复制步骤。将NDArray打包到m

浏览 1提问于2018-12-31得票数 1

1回答

mxnet:当在模型中使用RNN时，模型初始化器会以多个GPU的上下文崩溃。

python、gpu、mxnet

在我修改这一行之前，一切都很顺利：至context = [mx.gpu(i) for i in range(GPU_COUNT)]/base.h:388: Invalid context string[] 我只使用了mxnet几天，所以我对可能出错的地方不太了解。这让我认为这是RNN，实际上，当我移除代码的RNN部分(因此它实际上

浏览 0提问于2018-11-29得票数 0

1回答

mxnet - GPU初始化时间过长

python、performance、gpu、mxnet

这个问题的后续部分：import mxnet as mx profiler.set_config这之后的任何操作都会非常快，但第一个GPU操作需要22秒(无论我使用什么操作)。所以初始化很可能需要很长的时间。

浏览 1提问于2019-07-30得票数 1

1回答

在MXNet中“无法分配到CPU memory”是什么意思？

python、memory、mxnet

奇怪的是，在stackoverflow上还没有这样的问题。我正在使用MXNet，试图在我的PC上运行VQA示例，使用mx.io.DataIter读取数据，但是 mxnet.base.MXNetError: [11:05:07] c:\projects\mxnet-distro-win\mxnet-build\src\storage\./cpu_devic

浏览 0提问于2018-08-24得票数 0

3回答

有没有办法检查mxnet是否使用我的gpu？

tensorflow、gpu、mxnet

我能看看mxnet有哪些可用的GPU吗？tf.test.gpu_device_name() 在mxnet中

浏览 0提问于2018-03-02得票数 10

回答已采纳

1回答

MXNET多迭代器(结合使用.rec迭代器和NDArray迭代器)

mxnet

如何在MXNET中创建组合迭代器？例如，给定一个记录(.rec)迭代器，如果我想更改与每个图像对应的标签，则有两个选项: a)创建一个具有相同数据(图像)和新标签的新rec迭代器。b)使用原始.rec迭代器和NDArray迭代器创建多迭代器，以便多迭代器从原始.rec迭代器读取数据(图像)并从NDArray迭代器读取标签。选项(a)很繁琐。关于如何创建这样的多迭代器有什么建议吗？

浏览 0提问于2017-08-22得票数 2

1回答

如何在GPU上运行datawig？

python、data-science、mxnet、imputation

我试图通过传递带有gpu id的mxnet.context来运行Imputer.fit，但是我的代码似乎仍然可以在cpu上运行。from mxnet import gpuctx = gpu(0)imputer.fit(train_df=imputer_train_df, num_epochs=10, ctx=我知道mxnet不支持我现在使用的cuda 11.0。

浏览 22提问于2020-12-29得票数 0

1回答

MXNET -无效类型'<type‘numpy.ndarray’>对于数据，应该是NDArray，numpy.ndarray，

python、numpy、mxnet

我对mxnet的基本IO有困难。我试图使用mxnet.io.NDArrayIter读取内存中的数据集，以便在mxnet中进行培训。_sync_copyfrom(value) File "/usr/local/lib/python3.5/dist-packages/mxnet/ndarray/ndarray.py", linetype

浏览 1提问于2018-04-12得票数 1

回答已采纳

点击加载更多