1回答
我想要将一个270万行的数据帧拆分为100000行的小数据帧，这样最终得到大约27个数据帧，我也想将其存储为csv文件。我正在尝试编写自己的代码来实现这一点，但是如果你知道一些我可以使用的Scala (Spark)函数，那就太好了！ 感谢大家的建议！
浏览 10提问于2019-03-14得票数 2
回答已采纳
2回答
我有一个包含超过1m条记录和超过40个变量的大型数据帧，我希望通过一个循环来更新这些记录，以防止出现故障，并且文件的大小每次都不同。我想将这100多万行拆分成n个较小的集合，每个集合都有一个新的数据帧名称，例如以1,2，...，n，newdf1，newdf2，newdf3，...结尾。R中拆分函数只拆分向量，但它仍然在数据帧中，而不是创建数据帧的多个子集，我需要这些子集来保留40个变量中的数
浏览 1提问于2020-08-26得票数 0
我需要为我的数据集实现分页(在星火scala中)。请如何将火花数据集/数据集拆分为N个行号？
-NS
浏览 0提问于2018-10-02得票数 2
回答已采纳
1回答
当我将数据分割成两个新的数据帧时，两个新数据帧的行号将索引原始数据帧。
例如，如果dfA有行号1、2、3、4；我想创建两个基于交替行的新数据帧(因此，行1和3转到dfB，行2和4转到dfC)。但是我希望行号在dfB和dfC中有新的索引，这样实际上dfB和dfC都有1&2作为行索引。这是一个问题，因为当我将我的(实际上要大得多的df)拆分为A和B时，每当我试
浏览 5提问于2016-03-16得票数 0
回答已采纳
1回答
我有一个数据帧与一个可变的数字或行，并希望将其拆分成一个列表的数据帧(或只是多个dfs)的组附近的行。应该组合在一起的邻近行可以通过由数值上彼此相邻的样本组成的每个组的可变列来理解。可变列中的内容的确切身份将不是一致的b/w数据集。
浏览 11提问于2020-10-27得票数 2
回答已采纳
3回答
我有一个很长的数据帧，如下所示： 1 2.5 A 3 4.6 Bset.seed(10)我不想被任意的数字拆分案例2:按</em
浏览 1提问于2012-10-30得票数 13
回答已采纳
2回答
我想将此数据帧拆分为仅按日期部分拆分的数据帧列表。因此，每个数据帧都将包含当天的所有数据。我研究了拆分函数，但不确定如何使用列值的一部分？
浏览 8提问于2013-05-31得票数 4
回答已采纳
当我使用udf按分隔符拆分列中的字符串时，我总是得到一个错误。我正在使用Scala不知道这是什么，也不知道如何修复它。这是我的udf和数据帧：
val rsplit = udf((refsplit: Stri
浏览 1提问于2016-05-24得票数 8
1回答
我已经创建了一个pyspark数据帧，形象化地看起来像这样： >>> df
------------------------------30 | 50 | ... |300 | 350 | 50 | ... |500 | 5 然后我还创建了随机的行号列表，如下所示： my_list = [[2, 5],[4, 1, 3]] 根据这个列表的结构，我希望创建pyspark<
浏览 16提问于2019-04-18得票数 0
回答已采纳
2回答
我有10个数据帧的列表，我想按名称选择每个数据帧的一行。该列的名称为name。我想要选择name=Ready所在的每一行。 我尝试了一些方法。如果我声明了确切的行号(这里是2)，这就行了： lapply(list, `[` ,c(2),) 但由于数据帧中的行号不同，我将应用类似于name=Ready的内容： lapply(list, `[`
浏览 6提问于2021-07-26得票数 0
回答已采纳
2回答
我想将该文件读入R，然后将其拆分。 "Global" = c(.4345, .1256, .8754, .9923, .7124, .2999))数据帧11 337.0
浏览 14提问于2017-06-20得票数 1
回答已采纳
1回答
我有下面的数据框0 a h0 c j1 e l2 g nA B C0 b i 和
A B如何将数据帧拆分成多个数据帧？
浏览 0提问于2017-01-24得票数 2
回答已采纳
2回答
按行数拆分数据帧
、、
我有一个由400'000行和大约50列组成的数据帧。由于此数据帧如此之大，因此处理它的计算量太大了。我想将这个数据帧分割成更小的数据帧，之后我将运行我想要运行的函数，然后在结束时重新组装数据帧。没有我想用来拆分这个数据帧的分组变量。我只想将它按行数拆分。例如，我想将这个400‘000行的表拆分为400
浏览 0提问于2011-08-15得票数 33
回答已采纳
我有一个数据帧"x"，其中有两列"x1“和"x2”kv,true 45mp,true 75bm,null 550我想将此数据帧转换为根据其状态和值过滤数据的格式kv 45 450
浏览 0提问于2016-11-18得票数 1
1回答
我有三个数据帧，每个数据帧大约有64,000行和相同数目的794列。我需要通过一个公共列对所有3个数据帧执行inner_join。由于此错误“无法分配大小为163 Mb的向量”，因此我理解需要将数据帧按行拆分。在执行inner_join时，为了不耗尽内存，要拆分的最佳段数是多少？如果我必须将它们分割成10个片段，我如何循环这些段来对所有3个数据帧
浏览 1提问于2020-11-05得票数 0
回答已采纳
1回答
我有一个时间序列数据集，其中除了“时间戳”列(数据帧的索引)之外还包含10个特征。缩放这些特征的值并实现k-means聚类后，我得到了np.array形式的结果。如何在不使用时间戳索引的情况下保留时间戳索引？
浏览 106提问于2021-09-29得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
