我想用sitze 10^15和numpy和MPI创建一个向量。
我不知道如何开始。我试着用
v = np.random.rand(10**15,1)但这超出了我的记忆。
发布于 2020-05-05 20:21:08
你不能。这是几千兆兆字节的数据,甚至连存储在磁盘上都太多了。考虑重新设计您的程序,以减少数据量或迭代处理数据。
发布于 2020-06-20 10:52:36
Dask数组协调许多Numpy数组,在网格中排列成块。它们支持Numpy API的一个大子集。
如果希望结果为NumPy数组,则调用.compute()。
%%time
import dask.array as da
answer_sum = da.random.random((10**15)).sum().compute()
answer_mean = da.random.random((10**15)).mean().compute()
print(answer_sum)
print(answer_mean )https://stackoverflow.com/questions/61612938
复制相似问题