如果进行混洗，这个5维numpy数组几乎不占用任何内存
。
混洗（Shuffle）是指将数据集中的样本顺序打乱，以增加数据的随机性。在机器学习和数据分析中，混洗是一个常用的操作，可以用于训练集和测试集的划分、数据增强等场景。
对于一个5维的numpy数组，混洗操作可以通过numpy的shuffle函数来实现。该函数会随机打乱数组中的元素顺序，从而实现混洗的效果。具体代码如下：
import numpy as np
# 创建一个5维numpy数组
arr = np.random.rand(2, 3, 4, 5, 6)
# 对数组进行混洗
np.random.shuffle(arr)
# 打印混洗后的数组
print(arr)在进行混洗操作时，numpy并不会创建新的数组，而是通过改变原数组中元素的顺序来实现混洗。因此，混洗操作几乎不会占用额外的内存空间。
混洗操作在机器学习中有广泛的应用。例如，在训练神经网络时，混洗可以帮助模型更好地学习数据的分布特征，提高模型的泛化能力。此外，混洗还可以用于数据增强，通过随机改变数据的顺序来生成更多的训练样本。
腾讯云提供了多个与混洗相关的产品和服务，例如腾讯云机器学习平台（https://cloud.tencent.com/product/tcmlp）和腾讯云数据处理服务（https://cloud.tencent.com/product/dps）。这些产品和服务可以帮助用户在云端进行混洗操作，并提供高性能的计算和存储资源，以满足混洗大规模数据的需求。
相关·内容
我有一些图像以numpy数组的形式存储在80个块中。 trainImages.shape
# (715, 80, 96, 96, 3) 例如，trainImages有715个块，每个块有80个大小的图像(96,96,3)。 这个数组是dtype=float32的，所以它占用了内存中相当多的空间，大约6 6GB。 我用这段代码打乱了方块 shuffler = np.random.permutation(trainImages.shape[0])
trainImages = trainImages[shuffler] 我注意到RAM使用率下降到几乎为0。形状仍然是一样的，我可以显示图像。所有的数
浏览 19提问于2021-01-30得票数 0
我正在研究一个神经网络，当我试图对两个numpy.ndarray进行混洗时，我得到了这个错误。我尝试重新检查shuffle函数格式，但找不到任何错误。请帮帮忙
train_images,train_labels = shuffle(train_images,train_labels)
TypeError
Traceback (most recent call last)
<ipython-input-8-b3f4173331ac> in <module>
18 print("Traini
浏览 0提问于2018-12-08得票数 0
4回答
我知道我可以用sample方法从数组中随机挑选一个元素，但这就留下了一个元素被多次挑选的可能性。我可以先打乱数组，然后按顺序从第一个元素到最后一个元素，但我知道这是内存密集型的，如果可能的话，我正在寻找一种不那么密集型的方法！
浏览 0提问于2012-07-02得票数 2
回答已采纳
2回答
我有两个不同的numpy数组，我想以异步的方式打乱它们。
当前的解决方案取自，并按如下方式进行：
perm = np.arange(self.no_images_train)
np.random.shuffle(perm)
self.images_train = self.images_train[perm]
self.labels_train = self.labels_train[perm]
问题是，每次我这样做，它都会使内存加倍。不知何故，旧的数组没有被删除，我猜可能是因为切片操作符创建了视图。出于纯粹的绝望，我尝试了以下更改：
perm = np.arange(self.no_imag
浏览 2提问于2016-06-15得票数 2
17回答
我有两个不同形状的numpy数组，但长度(前导维度)相同。我想对它们中的每一个进行混洗，以便相应的元素继续对应--即根据它们的领先索引对它们进行一致的混洗。
这段代码可以工作，并说明了我的目标：
def shuffle_in_unison(a, b):
assert len(a) == len(b)
shuffled_a = numpy.empty(a.shape, dtype=a.dtype)
shuffled_b = numpy.empty(b.shape, dtype=b.dtype)
permutation = numpy.random.permutat
浏览 3提问于2011-01-05得票数 297
回答已采纳
1回答
以下操作在Pandas中的名称是什么？
import numpy as np
import pandas as pd
x=np.linspace(10,15,64)
y=np.random.permutation(64)
z=x[y]
ndarray "x“(我假设)使用ndarray "y”进行混洗，然后将结果ndarray赋给"z“。
此操作的名称是什么？我在Pandas文档中找不到它。
谢谢，Pawel
浏览 2提问于2020-02-10得票数 0
2回答
我有一个形状为(40000000,1600000)的csr_matrix。我使用以下方法对此矩阵进行混洗：
index = np.arange(np.shape(csr_matrix)[0]) np.random.shuffle(index) csr_matrix_new = csr_matrix[index, :]
但得到的错误是“分割错误”。
我已经在小型csr_matrix上测试了这种随机方法，它可以正常工作。有人知道怎么修吗？
浏览 7提问于2017-06-23得票数 0
我感兴趣的是得到一组相同大小的指数。例如，我有以下Python代码： import numpy as np
p = 2
n = 10
labels = np.random.randint(p, size=n) 上面的代码将创建10标签(0和1值)，但0's的总数不一定等于1's的总数。我需要的是自动获取相同的数字:例如0 1 0 0 1 1 0 1 0 1 (实际上有5个0's和5个1's)。上例的相同概念可以推广到任何p和n，使得n/p是整数。 任何帮助都将不胜感激！
浏览 16提问于2021-08-03得票数 1
回答已采纳
在pyspark中，我读取了一个非常大的目录，大约4 TB，在映射它之后，它看起来需要几天时间才能保存回来。我真的等不及了，但我的烟斗无论如何都会破裂，我被迫退出Spark，所以这不是一个真正的选择。
我正在寻找一个更快的方法，无论是将文件保存为Gzip，还是将一些参数传递给我的集群，或者其他任何东西，以加速保存操作。
注意:我合并了22500个文件，得到了大约500MB的22500个文件(我想)-但我不知道分区的数量是否是最重要的。
datum = sc.textFile("s3n://file/path/*")
data2json = datum.map(lambda x
浏览 0提问于2015-12-10得票数 0
2回答
如何使用代码来做到这一点：
产生15个随机数编辑:从1- 15，没有任何顺序，只出现一次，例如。
1 4、2、5、3、6、8、7、9、10、13、12、15、14、11
rand()或arc4rand()可以重复一些，这不是我想要的。
谢谢
浏览 3提问于2010-04-10得票数 0
回答已采纳
我有一个很大的数据集，我想洗牌。如果我可以同时打开几个文件(例如hdf5，numpy)，按时间顺序遍历我的数据，并将每个数据点随机分配到其中一个堆中(然后对每个堆进行混洗)，那就太好了。
我真的没有在python中处理数据的经验，所以我不确定是否有可能在不将文件的其余内容保存在内存中的情况下将其写入文件(我一直在使用np.save和savez，但收效甚微)。
在h5py或numpy中，这是可能的吗?如果可能，我该如何做？
浏览 22提问于2019-07-09得票数 0
回答已采纳
6回答
我有一个numpy数组，如下所示：
Xtrain = np.array([[1, 2, 3],
[4, 5, 6],
[1, 7, 3]])
我想对每一行的项目分别进行混洗，但不希望每一行的混洗都是相同的(就像在几个示例中一样，只是混洗列的顺序)。
例如，我需要如下所示的输出：
output = np.array([[3, 2, 1],
[4, 6, 5],
[7, 3, 1]])
如何以有效的方式随机地对每一行进行随机洗牌？我实际的np数组有
浏览 4提问于2018-05-28得票数 13
对于我的任务，我必须创建游戏“memory”。我一直被我随机给每张牌一种颜色的部分卡住了。
我首先创建了这个数组
int rectColorArray[] ={BROWN, BROWN,WHITE, WHITE,RED, RED, GREEN, GREEN};
并在我希望它只能选择每种颜色的地方做了一个循环。
void drawCards(int rectColor){
int length = 50;
int xPos =0;
int yPos =0;
for(int i = 7; i >= 0; i--){
rectColor = rectColorArra
浏览 1提问于2020-01-03得票数 0
1回答
我是个新手，所以请原谅我的无知。
有没有一种快速而简单的方法来完成以下操作：
men:{gerald:{"name":"Gerald", "age":50},mike:{"name":"Mike", "age":50},charles:{"name":"Charles", "age":50}}
其中名称是Mike -设置在位置1(索引0)
我只想打乱项目，这样第一个项目就按照我选择的名称设置了。
任何帮助都比欢迎的多。
浏览 0提问于2011-12-01得票数 0
回答已采纳
2回答
给定以下NumPy数组，
> a = array([[1, 2, 3, 4, 5], [1, 2, 3, 4, 5],[1, 2, 3, 4, 5]])
它足够简单，可以对单行进行混洗，
> shuffle(a[0])
> a
array([[4, 2, 1, 3, 5],[1, 2, 3, 4, 5],[1, 2, 3, 4, 5]])
有没有可能使用索引表示法来独立地对每一行进行混洗？或者你必须遍历数组。我脑海里想的是，
> numpy.shuffle(a[:])
> a
array([[4, 2, 3, 5, 1],[3, 1, 4, 5, 2],[4, 2
浏览 0提问于2011-02-18得票数 23
回答已采纳
1回答
有人能详细解释一下bogosort的平均用例时间是多少吗？
算法的伪代码：
while not isInOrder(deck):
shuffle(deck)
浏览 0提问于2013-03-03得票数 2
在Spark core的" example“目录中(我使用的是Spark 1.2.0)，有一个名为"SparkPageRank.scala”的示例，
val sparkConf = new SparkConf().setAppName("PageRank")
val iters = if (args.length > 0) args(1).toInt else 10
val ctx = new SparkContext(sparkConf)
val lines = ctx.textFile(args(0), 1)
val links = lines.map
浏览 0提问于2015-09-05得票数 3
1回答
混洗大型内存映射的numpy数组
、、、、
我在一个.npy文件中有一个大小约为30 GB的维数为(20000000, 247)的数组。我有32 GB可用内存。我需要沿行打乱数据。我已经在mmap_mode中打开了该文件。但是，如果我尝试就地修改之外的任何东西，例如np.random.permutation或创建索引p的random.sampled数组，然后返回array[p]，我会得到MemoryError。我也尝试过在块中混洗，然后尝试堆叠这些块来构建完整的数组，但MemoryError。到目前为止，我找到的唯一解决方案是在mmap_mode = 'r+'中加载文件，然后执行np.random.shuffle。然而，
浏览 4提问于2019-09-25得票数 1
4回答
我有一个包含10,000个条目的字符串列表。我有一个shuffle例程，但是访问任何一个项目都需要花费很多时间。浏览所有10k个项目需要花费大量的时间。
我想保存它，做磁盘，然后用另一种方法在文件上做一个混洗。
有什么建议吗？
浏览 0提问于2009-10-21得票数 3
回答已采纳
我要为孩子们开发一个记忆游戏，我有6个不同的图像在12个地方随机显示。注意(每个图像显示两次)，我想知道如何随机设置图像以及如何使用动画处理UIImage？任何帮助..。
浏览 4提问于2011-08-22得票数 0
回答已采纳
因此，如果我有一个csv文件，如下所示：
User Gender
A M
B F
C F
然后，我想要写另一个csv文件，其中的行像这样打乱(作为示例)：
User Gender
C F
A M
B F
我的问题是，我不知道如何随机选择行，并确保从原始csv文件中获得每一行。作为参考，我的csv文件大约为3 3gb。如果我将整个数据集加载到数据帧中，并使用随机包对其进行混洗，则由于RAM使用，我的PC会崩溃。
浏览 4提问于2019-09-17得票数 2
我的包含文件(include.php)如下所示：
<?php
$myarray=(a,b,c);
shuffle($myarray);
?>
我的主要php文件是：
include('include.php');
if isset($_POST['submit_button']){
echo "Button was clicked";
echo $myarray;
}
else {
echo "Not clicked.";
echo $myarray;
浏览 0提问于2012-04-04得票数 0
回答已采纳
1回答
我们如何才能获得用于spark作业的总内存。我不能得到确切的参数，我们可以参考检索相同的。我已经引用了Spark UI，但不确定我们可以引用的字段。另外，在Ganglia中，我们有以下选项:a)内存缓冲区b)缓存内存c)空闲内存d)共享内存e)空闲交换空间
无法获取与所用内存相关的任何选项。有没有人知道这件事。
浏览 2提问于2016-09-21得票数 8
如何对scipy稀疏矩阵的行进行混洗？ 有一个scikitlearn.utils.shuffle，但它返回一个新的矩阵，因此对于非常大的稀疏矩阵，混洗不是就地完成的，而是复制矩阵。 有numpy.random.Generator.shuffle，但它似乎是work only for CSR matrices。 如何有效地打乱scipy稀疏矩阵的行数，不管它是以什么格式存储在内存中的？
浏览 14提问于2020-12-02得票数 0
回答已采纳
1回答
我有一个游戏，我正在尝试开始，它显示一个随机的卡，但它绘制重复。我不想重复使用。我使用了大约100张图片--我只是放了几张图片，这样你们就会明白了。
我怎样才能让它不显示任何重复的东西呢？
提前谢谢你，我已经在其他地方检查过了，有了数字似乎就更容易了。我在使用图片时有点迷茫……
<script>
var cards = new Array();
cards.push("images/apple.jpg");
cards.push("images/pear.jpg");
cards.push("images/banana.jpg");
浏览 12提问于2018-08-22得票数 0
下图显示了内存使用情况： ? 出现内存错误。我使用的是Numpy和Python3。我有两个形状分别为X和Y的numpy数组(36000,256,256,3)，当我执行以下代码时，会出现内存错误。它们是准备训练数据的代码。有没有其他方法可以使用更少的内存呢？ 这是我的处理器：Intel® Xeon(R) CPU E5-2620 v4 @ 2.10GHz × 32 错误显示在：X, Y = shuffle(X,Y)中 X = []
Y = []
for im , normal in zip(images,normals) :
image = getImageArr(d
浏览 22提问于2019-06-05得票数 0
回答已采纳
2回答
我正在使用knuth混洗来随机化数组。我希望能够添加另一个数组，并以相同的方式将其随机化。我之前曾想过在字符串中分隔数组，比如['A|1|I,B|2|II,C|3|III,D|4|IV']等。
在stackoverflow上，我读了，但我不知道如何安排它来进行knuth洗牌。
这是我现在用来从第一个数组中获取字符串的JS，附加代码取自上面的链接。
Array.prototype.knuthShuffle = function()
{
var i = this.length, j, temp;
while ( --i
浏览 7提问于2013-10-31得票数 0
我正在使用Xcode5.0为iPad编写一个应用程序，我试图实现一个允许NSMutableArray混洗的类别。我正在使用测试驱动开发，并且我使用Objective-C++编写了如下测试：
size_t randomInteger(size_t);
@implementation ShuffleArrayTests
- (void)testsShufflesAnArray
{
NSMutableArray* array = [@[@"one", @"two", @"three", @"four", @"five
浏览 2提问于2014-02-16得票数 0
我将spark.shuffle.spill设置为false，但当我检查执行器日志时，spark 1.5.0中仍然发生溢出。我搜索了spark github repo，发现他们将忽略1.6.0中的这个配置参数，并在必要时继续溢出。但我使用的是1.5.0，我不确定它是否已经在早期版本中生效。
浏览 1提问于2015-12-16得票数 1
1回答
随机化二维数组地址的整数
、、、
我正在尝试对二维数组的参数进行随机化。
arrayi: i只能是(0-2)，j也只能是(0-2)。
诀窍是永远不要重复一个地址，例如，数组只能出现一次。
关于如何实现这一点有什么建议吗？我可以使用random()来做这件事吗？
浏览 3提问于2014-10-08得票数 0
我有一个正常的可湿性粉剂循环在home.php上显示博客帖子。我正在尝试获取一个随机的div来填充每个博客帖子之后。因此，它将是： 博客文章-> RANDOM DIV ->博客文章-> RANDOM DIV 依此类推……我尝试创建“推荐信”帖子类型，并用WP_Query对它们进行随机化，但它仍然只能在每个页面上拉出一个。我需要多个显示，但下面的每个帖子不同。我也使用ACF，所以我创建了证明自定义字段块，但我仍然不能随机化显示多个项目。 PHP (循环内)： <a class="row blogRoll"href="<?php the_pe
浏览 10提问于2020-09-16得票数 0
1回答
我有一个非常大的CSV格式的数据集(500K+行和6500+列)，它看起来像这样(所有内容都是整数值，然后在批量导入循环期间转换为float64 )： 1,7930472962,92,5,2,9471037239,67,2,1...8371097814,81,2,3
2,2091185638,92,5,2,3773622239,67,2,1...8378747918,81,2,3 因此，基于行的长度，我不能将所有内容都放入内存中，我从CSV中流式传输所有内容，如下所示： train_dataset = tf.data.experimental.make_csv_dataset(
sy
浏览 16提问于2019-10-15得票数 0
我可以在数组中选择一些元素，然后在PHP中对其进行混洗吗？你知道，当你使用
shuffle(array)
，它将数组中的所有元素都置乱，但我只想在保持其他元素不变的情况下将数组中的一些元素置乱，该如何做呢？
浏览 0提问于2009-11-21得票数 3
我正在用C语言编写微控制器的FFT算法，我在决定是将输入数据的实部和虚部存储在结构数组中，还是使用指向结构数组的指针时遇到了麻烦。我面临着相互冲突的要求，即代码必须在很小的内存中运行，但又要尽可能快。我相信指向结构的指针数组会有更大的内存开销，但我的代码中有一行基本上类似于以下代码：
for (uint8_t i = 0; i < RECORD_SIZE; i++)
{
uint8_t decimateValue = fft_decimate(i);
fftData[i]->realPart = fftTempData[decimateValue]->real
浏览 5提问于2011-07-01得票数 0
回答已采纳
我有两个这样的数组：
Array $a
(
[0] => Array
(
[video_id] => 1
[video_title] => A1
[video_type] => 2
[user_id] => 7
[video_link] => /challenge_video_1490082018-user_uservideo.mov
[video_image] => challenge
浏览 0提问于2017-03-23得票数 0
我不知道如何将存储在数组(case_value)中的所有金额输入到另一个数组(.I)中。我的程序可以运行，但永远不会结束。这就是我到目前为止所拥有的。此外，如果有任何方法可以使我的代码更有效率，我将不胜感激。谢谢你的帮助。
import java.util.Scanner;
import java.lang.Math;
public class DOND
{
public static void main (String [] args)
{
Scanner sc = new Scanner (System.in);
int [] cases=new int [26]; //array fo
浏览 2提问于2014-11-02得票数 0
我正在使用TFrecords和keras拟合神经网络模型。我有一个相对较大的数据集，它是非常异构的。在模型的训练过程中，我已经使用了shuffle my dataset，如文档示例: (但无法将其全部混洗，因为它会占用太多内存)，我还将我的数据集分成多个小碎片，每个碎片大小相等。
然而，我有理由认为这种“近似”的混洗是不够的，我还认为馈送已经混洗的数据将提高训练速度。
所以现在我的问题是:在我将我的数据集分成Tfrecords分片后，是否有可能高效地编写随机获取2个分片的代码，加载它们，对它们进行混洗，然后重写2个分片(现在在两个分片之间进行混洗)。因此我可以重复这个过程很多次，这将导致正确的
浏览 2提问于2020-12-08得票数 1
Vowpal Wabbit会在每一次epoch/pass后自动洗牌吗？我希望创建的缓存文件将包含混洗元数据，这是像大众默认的在线SGD方法这样的在线算法所必需的。例如。
vw -d train.txt -c --passes 50 -f train.model
如果不是，我有一个备份脚本，可以在每次遍历时手动处理数据
# Create the initial regressor file
vw -d train.txt -f train.model
# For the next 49 passes, shuffle and then update the regressor file
for
浏览 4提问于2014-01-06得票数 6
我正在Windows窗体中练习冒泡排序算法。我已经让我的程序达到了算法工作的程度，我可以在列表框中以非数字顺序生成从1到100的数字，然后运行冒泡排序算法对这些数字进行排序。我遇到的问题是，我不希望在列表框中生成任何重复的数字。基本上，我有一个单选按钮，单击时会在列表框中生成100个整数。然后我有一个“排序”按钮，它将在列表框中对这些数字进行排序。我目前使用数组来做这件事，因为在编写冒泡排序算法和在列表框中创建随机数时，数组是最容易使用的(这就是为什么我不会创建一个新的列表并试图以这种方式对其进行混洗)。如果任何人有任何关于我可以做些什么来防止重复的建议，我将非常感谢。下面是我的代码摘录。
i
浏览 0提问于2016-05-28得票数 1
1回答
我有一个数组的问题，我想获得位置的值，但不重复位置(对于next.random，值是重复的，但我需要一次获得位置)，我发布我的代码让你看到它们。我希望你能帮助我。
int d = 0;
for (int i = 0; i < caminohormiga.Length; i++)
{
int start2 = random.Next(0, caminohormiga.Length);
d = caminohormiga[start2];
MatrizAux[i] = d;
if
浏览 1提问于2013-01-13得票数 0
回答已采纳
2回答
我是一个全新的编码新手，所以如果我的问题很愚蠢，请容忍我(&请将任何答案写出来作为代码，否则我不会得到它…)。我正在做一个Qualtrics调查页面，其中我有两个可选答案-每个答案都是一个项目列表。我正在尝试打乱列表，以便每个参与者以不同的顺序查看它们。我从网上得到了下面的代码。
我的HTML列表如下所示：
<div id="enriched">
<div class="list_item">lots of sunshine</div>
<div class="list_item"
浏览 0提问于2015-12-16得票数 4
我有一个带有名字列表的视图。当我摇动电话时，我想把列表弄乱。我知道我必须使用加速度计来检测抖动，但我不确定如何混淆名单。有什么建议吗？
谢谢
浏览 0提问于2012-03-23得票数 1
回答已采纳
下午好,
我有一个Keras模型，该模型有两个输入。输入通过编码层进行处理，然后在下一层中连接输出。
对于.fit方法，有一个名为"shuffle“的参数，我通常将它留在True上，但在这种情况下我有点不确定。
输入是相互依赖的。事实上，第二个输入是对特定特征中第一个输入的补充。在这种情况下设置shuffle=True是个坏主意吗？
假设我关注的特性有一个True或False值。如果对于这个特性，Input1的值是"True“，那么我希望Input2的输入是"False”。
如果我将shuffle设置为True，我会得到一个"True“-- "True”
浏览 0提问于2020-10-07得票数 1
我们正在课堂上做一个寻宝游戏作为一个项目。下面是我们到目前为止拥有的代码。我要随机找出宝藏按钮的位置。我的问题是:我是否需要创建一个包含EmptyButton和TreasureButton的数组，然后对其调用Random，或者有没有办法在TreasureButton类中创建一个随机布局？ 到目前为止，我们的代码如下 public class TreasureGame
{
// has-a number of tries
private int numberOfTriesLeft = 50;
//has-a number of hidden treasure
p
浏览 31提问于2020-11-22得票数 0
2回答
假设我有这样的结果： my_list = [{'id':'2','value':'4'},
{'id':'6','value':'3'},
{'id':'4','value':'5'},
{'id':'9','value':'10'},
{'id':'0','value':'9'
浏览 16提问于2020-01-22得票数 2
3回答
我很难理解这个类，我所看到的一切都没有真正的帮助。我会让我的问题尽可能简单。
如果我有考官1，考官2，考官3和route1，路由2，路由3。
都是字符串。
我如何将考官随机分配到一条路线？这可能是一个愚蠢的问题，但我就是想不通。
浏览 0提问于2012-02-20得票数 4
回答已采纳
我可以在PHP中做到这一点，但我正尝试在BASH shell中工作。我需要获取一个数组，然后随机混洗内容并将其转储到somefile.txt。
因此，给定元素为a;b;c;d;e;f;的数组Heresmyarray，它将生成一个输出文件output.txt，其中将包含元素f;c;b;a;e;d;
元素需要保留分号分隔符。我见过许多bash shell数组操作，但似乎没有任何操作接近这个简单的概念。感谢您的帮助或建议！
浏览 0提问于2011-04-04得票数 12
回答已采纳
我正在尝试理解我对JavaScript对象的困惑之处。具体地说，我感兴趣的是找出导致对象引用中断的原因。
为了演示这一现象，我提供了Chrome的JavaScript控制台的一些输出的副本。请注意，我在这里使用的是数组，但考虑到JS中数组和对象之间的细微差别，我们希望对象的行为类似。为了清楚起见，我添加了一些注释。
// Set x to some array literal
> x = [1, 2, 3, 4, 5]
[1, 2, 3, 4, 5]
// Set y to x
> y = x
[1, 2, 3, 4, 5]
> x
[1, 2, 3,
浏览 0提问于2013-04-28得票数 4
回答已采纳
如果我执行A.leftOuterJoin(B)，其中A是具有10亿个元素的RDD(K，V)，B是具有1000个元素的RDD(K，W)，Spark是否仍然将A的10亿个元素中的每个元素复制到新的RDD中？
浏览 0提问于2015-03-20得票数 2
是否有可能均匀地对n大小的数组中的元素进行洗牌，即n！在预期的O(n)时间内，出现的组合是相同的。怎么会这样呢？当我尝试这样做的时候，我想到的第一件事就是从1到n中挑选一个随机数i，看看A[i]是否已经被选中了，如果已经被选中了，那么重复一遍，否则就把A[i]放在B中第一个可用的位置。然而，此优惠券收集器问题已预期时间O(n log n)。有人能推荐一个O(n)预期时间算法吗？
谢谢。
浏览 0提问于2011-04-11得票数 3
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
