将列表转换为dataframe有问题-并非所有元素都放入dataframe中
。
当将列表转换为dataframe时，有时候会遇到一些元素没有被正确地放入dataframe中的问题。这可能是由于以下几个原因导致的：
- 数据类型不匹配：dataframe要求每一列的数据类型必须一致，如果列表中的元素数据类型不一致，可能会导致某些元素无法正确转换为dataframe的列。在转换之前，可以先检查列表中元素的数据类型，并进行必要的类型转换。
- 列名不匹配：dataframe的每一列都需要有一个唯一的列名，如果列表中的元素没有提供列名，或者列名与dataframe中已有的列名冲突，可能会导致某些元素无法正确放入dataframe中。在转换之前，可以为列表中的元素提供合适的列名，并确保列名的唯一性。
- 数据缺失或不完整：有时候列表中的元素可能存在缺失或不完整的情况，例如某些元素为None或空值。在转换为dataframe之前，可以先对列表进行清洗，将缺失或不完整的元素进行处理或删除，以确保所有元素都能正确地放入dataframe中。
综上所述，当将列表转换为dataframe时，需要注意数据类型的匹配、列名的唯一性以及数据的完整性，以确保所有元素都能正确地放入dataframe中。如果遇到问题，可以逐步排查并解决上述可能导致问题的原因。
腾讯云相关产品和产品介绍链接地址：
- 腾讯云数据库（TencentDB）：https://cloud.tencent.com/product/cdb
- 腾讯云云服务器（CVM）：https://cloud.tencent.com/product/cvm
- 腾讯云人工智能（AI）：https://cloud.tencent.com/product/ai
- 腾讯云物联网（IoT）：https://cloud.tencent.com/product/iotexplorer
- 腾讯云移动开发（移动推送）：https://cloud.tencent.com/product/umeng
- 腾讯云对象存储（COS）：https://cloud.tencent.com/product/cos
- 腾讯云区块链（BCS）：https://cloud.tencent.com/product/bcs
- 腾讯云元宇宙（Tencent XR）：https://cloud.tencent.com/product/xr
相关·内容
我有一个熊猫DataFrame，我想做一些操作。首先，我使用以下代码对熵进行排序：
entropy_dataframe.sort_values(by='entropy',inplace=True,ascending=False)
这给我提供了以下数据格式(<class 'pandas.core.frame.DataFrame'>)：
entropy identifier
486 1.000000 3.955030e+09
584 1.000000 8.526030e+09
397 1.000000 5.623020e+0
浏览 0提问于2016-07-12得票数 0
回答已采纳
1回答
R列表到稀疏矩阵
、、、、
我试图用R从mongodb加载数据，但是我发现查询结果是非结构化的--数据，这是一个混乱的列表，结果如下：
df
[[1]]
list()
[[2]]
[[2]][[1]]
[1] "vector1"
[[2]][[2]]
[1] "vector2"
[[3]]
list()
[[4]]
list()
[[5]]
list()
[[6]]
[[6]][[1]]
[1] "vector1"
[[6]][[2]]
[1] "vector2"
[[6]][[3]]
[1] "vector3"
我试着把列表转换成矩阵，就
浏览 5提问于2016-03-08得票数 0
回答已采纳
1回答
基于ip范围的数据过滤方法
、、、、
我有两个列的dataframe。我想根据json文件中的ip范围过滤这个数据。
ip_ranges.json
[
{"start": "45.43.144.0", "end": "45.43.161.255"}
{"start": "104.222.130.0", "end": "104.222.191.255"}
...
]
Dataframe:
ip,p_value
97.98.173.96,3.7
73.83.192.21,6.9
...
浏览 0提问于2019-02-26得票数 0
回答已采纳
当我从列表中创建一个熊猫DataFrame并将其转换为带有特定小数分隔符的csv时，我发现了一个有点奇怪的行为。
它的工作方式与预期一致：
>>> import pandas as pd
>>> a = pd.DataFrame([['a', 0.1], ['b', 0.2]])
>>> a
0 1
0 a 0.1
1 b 0.2
>>> a.to_csv(decimal=',', sep=' ')
' 0 1\n0 a 0,1\n
浏览 10提问于2017-03-15得票数 2
3回答
我希望将星火DataFrame转换为另一个DataFrame，其具体方式如下：
我有火花DataFrame：
+---------+------------+
|protocol | count |
+---------+------------+
| TCP| 8231 |
| ICMP| 7314 |
| UDP| 5523 |
| IGMP| 4423 |
| EGP| 2331 |
+---------+------------+
我想把它变成：
+-----------
浏览 1提问于2018-05-17得票数 0
回答已采纳
2回答
我想检查dataframe中的列是否包含字符串。我本以为只要检查dtype就可以做到这一点，但事实并非如此。包含字符串的熊猫系列只有dtype 'object'，它也用于其他数据结构(如列表)：
df = pd.DataFrame({'a': [1,2,3], 'b': ['Hello', '1', '2'], 'c': [[1],[2],[3]]})
df = pd.DataFrame({'a': [1,2,3], 'b': ['Hello
浏览 4提问于2017-04-03得票数 8
回答已采纳
我有一个列表，例如ls1=['one', 'three']，还有另一个列表，例如ls2=['one', 'two', 'three']，我想检查ls1的所有元素是否都在ls2中。
浏览 167提问于2021-01-23得票数 1
回答已采纳
我有以下在熊猫数据帧上工作的函数 def event_list(df,steps):
df['steps_present'] = df['labels'].apply(lambda x:all(step in x for step in steps))
return df DataFrame有一个名为labels的列，值为list。此函数接受dataframe和Steps (这是一个列表)，如果参数列表中的所有元素都存在于dataframe列中，则输出具有新列Steps的dataframe value in df['labels
浏览 136提问于2021-04-02得票数 1
回答已采纳
2回答
我想区分一下序列或数组中的负号变化和正号变化。 series sign_change (desired output)
0 -2 0
1 -4 0
2 -2 0
3 1 1
4 2 0
5 8
浏览 22提问于2020-11-03得票数 1
回答已采纳
1回答
我有以下代码。输入是元组列表并且元组本身可以是元组列表，
案例1:输入
steps = [
('func_a', func_a()),
('func_b', func_b()),
('func_c', func_c())
]
输出：
[
('func_a', func_a()),
('func_b', func_b()),
('func_c', func_c())
]
案例2输入：
steps = [
('func_a', fu
浏览 8提问于2019-11-21得票数 0
我对熊猫比较陌生，现在正试图将熊猫的DataFrame行转换为字符串列表。
它工作得很好，但是原始DataFrame中的字符串在列表中被奇怪地修改了，因为一些人出于某种原因附加了一个"L“字符。
我非常感谢你的帮助。
>>data=pd.DataFrame(Data)
>>for r in data.iterrows():
>> r[1].tolist()
>>r[1]
a 16593
b 15
c 179.069
d 110000
e 5906
浏览 3提问于2016-05-27得票数 0
回答已采纳
如何替换此单个列标题： foo bar
0 0 0
1 0 0 要获取这些多层列： A B
a b
0 0 0
1 0 0 基于此数据帧映射 col1 col2 col3
0 foo a A
1 bar b B
2 baz c C 我正在尝试列表理解，试图创建一个新的多级列索引，但似乎不起作用……我有一种更简单的方法来实现这一点。 df1 = pd.DataFrame({'foo':[0,0],
浏览 12提问于2021-08-31得票数 1
回答已采纳
2回答
这指的是我以前的，它涉及从.asc文件中提取数据并在有多个分隔符的情况下分离它们。
我想对从上述问题生成的列表列表中的浮动元素执行数学操作。但是，已经实现了单个数据与字符串的分离，因为列表列表也以字符串的形式生成了单个元素，我无法对它们执行数学操作。
我希望能够访问列表中的每个元素，将它们转换为浮动类型，然后对它们执行数学操作。
下面是我的代码，在.asc文件中，字符串被分隔成单独的元素，并存储为列表列表。
这是我从更大的列表中得到的一组特定数据的图像。
我从列表中访问特定的数据集，然后当我试图将它们转换为浮动时，我会得到以下错误：ValueError:未能将字符串转换为浮
浏览 13提问于2022-11-29得票数 0
回答已采纳
考虑以下DataFrame：
import pandas as pd
df = pd.DataFrame({'id': [1, 2, 3],
'json_col': [ [{'aa' : 1, 'ab' : 1}, {'aa' : 3, 'ab' : 2, 'ac': 6}],
[{'aa' : 1, 'ab' : 2, 'ac': 1}, {&#
浏览 1提问于2018-11-25得票数 1
回答已采纳
2回答
我使用下面的for循环读取7个csv文件并将它们添加到列表中。
list <- list()
l <- 1
for(i in 1:7){
data <- read.csv(paste("file",i,".csv",sep=""),header=FALSE)
list[[l]] <- data
l <- l + 1
}
现在我有了一个名为“列表”的列表，其中包含7个数据，对吗？
8个数据格式中的每一个都包含相同的三列(姓名、姓氏、年龄)。我现在想补充如下：
df <- d
浏览 0提问于2015-05-15得票数 1
回答已采纳
我的DataFrame中有一个DataFrame列，但是当我使用DataFrame.to_dict('record')将该DataFrame转换为python列表时，以前的uint64会神奇地转换为DataFrame：
In [24]: mid['bd_id'].head()
Out[24]:
0 0
1 6957860914294
2 7219009614965
3 7602051814214
4 7916807114255
Name: bd_id, dtype: uint64
In [25]: mid.
浏览 5提问于2015-07-13得票数 8
回答已采纳
2回答
数字解密
、、、
考虑到以下代码：
list = [1, 0 ,3]
def decrypt(text, alphabet):
decrypt_final = ""
for j in alphabet:
aindex = alphabet.index(j)
for i in list:
if aindex == i:
decrypt_final = decrypt_final + str(j)
print(decrypt_final)
decrypt("103"
浏览 6提问于2020-02-08得票数 0
回答已采纳
这是我的密码
import pandas as pd
df = pd.DataFrame()
df['country'] = ['UK', 'UK', 'USA', 'USA', 'USA']
df['name'] = ['United Kingdom', 'United Kingdom', 'United States', 'United States', 'United States']
df[
浏览 7提问于2022-04-19得票数 -1
1回答
我正在做地理信息系统地图，一切都准备好了，但我仍然需要河流和湖泊。
1.在哪里可以找到OSM ?上所有层的列表
2.如何/在何处下载给定区域的一层? (水、湖泊/国家)
浏览 7提问于2013-03-26得票数 1
1回答
我在dataframe，X1 X2 X3中有三列，我想要在值从大于1变为0时计数行。如果之前0的值小于1，则不需要计数。
输入df：
df1=pd.DataFrame({'x1':[3,4,7,0,0,0,0,20,15,16,0,0,70],
'X2':[3,4,7,0,0,0,0,20,15,16,0,0,70],
'X3':[6,3,0.5,0,0,0,0,20,15,16,0,0,70]})
print(df1)
x1 X2 X3
0 3 3 6.0
浏览 0提问于2020-02-20得票数 0
1回答
我在这里遇到了一个难题，我正在寻找一种简单而动态的方法来检查列表字典中的所有列表是否都是相同的。
下面是我正在做的一个例子，但显然我的列表包含真实的数据(字符串)：
def sample_method(var=10):
d = {}
for i in range(var):
d[i] = range(10)
return d
def compare_method(d):
lists = d.values()
first = lists[0]
for lst in lists[1:]:
if first != ls
浏览 1提问于2013-05-07得票数 3
回答已采纳
4回答
我有一份清单：
elements = ['a', 'b', 'c', 'd']
以及包含我列表中的部分或全部元素的dataframe：
mycol
0 a
1 x
2 y
3 e
4 b
5 c
6 o
7 l
8 s
9 d
10 g
我想知道，为了找到列表中的所有元素，我必须在df上搜索多低的元素。在这种情况下，答案将是10，因为直到我找到列表中的所有元素为止。
谢谢
浏览 1提问于2021-08-27得票数 2
回答已采纳
1回答
我是pandas的新手，一直在努力使用pd.DataFrame(Dict)将字典转换为df。下面是更多细节:这个Dict是for循环的一部分，它在每次迭代中读入一个新的输入文件。因此，字典值(列表)每次都会更新，并采用不同的列表大小。问题是，一旦Dict包含所有键的空白列表(值)并输出："ValueError:如果使用所有标量值，您必须传递一个索引“，我的代码就无法执行pd.DataFrame(Dict)。 Dict = {'Title': [],
'Organization': [],
'City': [],
'Company
浏览 30提问于2019-03-04得票数 0
1回答
将函数数组应用于数据访问
、、、、
假设您有一个函数数组。每个函数返回一个具有相同索引和大小的pandas.Series对象。每个函数都接受相同的输入，即主数据df。
我正在寻找一个输出，该输出将本系列的每一项都作为结果数据帧的列。
目前，我有以下几点：
df_result = [f(df) for f in f_arr]
df_result = pd.DataFrame(df_result)
这需要很长时间(列表操作似乎有一些开销)，由此产生的数据就是我所需要的转换。我觉得应该有一个干净的地图/应用的方式来做到这一点。
浏览 3提问于2017-05-25得票数 0
回答已采纳
我看过的所有Rails教程似乎都围绕着创建一个新的数据库，然后使数据库的内容可以通过web页面进行访问。输入以下命令后，即可访问用户列表：
rails generate scaffold User name:string email:string
rake db:create:all
rake db:migrate
但是，如果您已经创建了包含数据的用户数据库，该怎么办？提供对用户数据库的访问的替代过程是什么？
更新1:我使用的是Postgres数据库。
浏览 1提问于2013-04-25得票数 0
2回答
当我有一个很长的列表时，比如
words = ['axcd', 'abcd', 'abef', 'abxf']
在每个字符串都具有相同长度的情况下，如何计算如下所示的数组
result[0] = [{char: 'a', freq: 4}]
result[1] = [{char: 'b', freq: 3}, {char: 'x', freq: 1}] # ordered by frequencies
result[2] = [{char: 'c', freq: 2
浏览 0提问于2018-04-24得票数 0
1回答
我有一个数据帧，希望将值转换为变量。
我尝试过使用as.numeric(unlist...)一个接一个地把它们拉出来(这不是一个很大的列表)，但我正在寻找一种更好的方法。
这是我的数据
dataframe = structure(list(V1 = c(564.58, 7834.1, 134.2), file = structure(c(2L,
1L, 3L), .Label = c("Blue", "Red", "Yellow"), class = "factor")), class = "data.frame"
浏览 5提问于2019-07-12得票数 1
回答已采纳
我刚刚开始使用Python的Pandas库，我偶然发现了一个我无法解决的问题。
dictionary = {key:list}
series = pd.Series(dictionary)
dataframe = pd.DataFrame(series)
print(dataframe)
因此，输出结果为：
0
key list
key list
key list
key list
我想要得到这个列表，并让列表中的每个值都有自己的列，如下所示：
0 1 2 3 4
key val0 val1 val2 val3 val4
key val0 val1
浏览 0提问于2015-09-04得票数 0
我想移动一个存储在old_field中的数组，如下所示：
[{id: "XXX", ...}, {"id": "YYY", ...}, ...]
在new_field中，如下所示：
{"XXX": {id: "XXX", ...}, "YYY":, {id: "YYY", ...}, ...}
因此，我尝试执行以下几个迭代：
$addFields: {
new_field: {
$reduce: {
input: "$old_field",
浏览 5提问于2022-11-18得票数 0
回答已采纳
我目前有一个熊猫DataFrame，其中包含以下格式的信息：
date new builds new houses new homes help to buy
0 2014-06-08 5 29 79 11
1 2014-06-15 5 30 79 11
2 2014-06-22 6 31 82 12
3 2014-06-29 5
浏览 3提问于2019-06-06得票数 0
回答已采纳
我编写了一个函数，该函数输出3个列表，并希望使每个列表都成为一个dataframe中的列。
函数返回由3个列表组成的元组，其中包含文本或文本列表。
以下是功能：
def function(pages = 0):
a = [title for title in range(pages)]
b = [[summary] for summary in title.summary]
c = [[summary2] for summary2 in title.summary2]
return a, b, c
data = function(pages = 2)
浏览 8提问于2022-06-28得票数 0
我正在学习星火和Scala，并在星火REPL中进行实验。
当我试图将列表转换为DataFrame时，它的工作方式如下：
val convertedDf = Seq(1,2,3,4).toDF("Field1")
但是，当我尝试将列表列表转换为具有两列( DataFrame，field1，field2)的列表时，
java.lang.IllegalArgumentException:需求失败:列数不匹配
错误信息：
val twoColumnDf =Seq(Seq(1,2,3,4,5), Seq(5,4,3,2,3)).toDF("Field1", (Fi
浏览 1提问于2018-06-22得票数 0
回答已采纳
1回答
我想将Mongo数据库的数据转储到一个csv/excel文件中。我的数据库有几个具有相同字段和嵌入字段的文档。我希望每个嵌入字段都是我的csv文件的一列，而每个文档都是一行。我们的目标是：
a_cursor = a_collection.find(filter, projection) # pymongo.collection.find() method
a_csv_file = print_cursor_to_csv(a_cursor,projection) # the method I would like to create
使用find()的filter参数，我将能够过滤mon
浏览 1提问于2017-01-12得票数 1
回答已采纳
我有一个由函数生成的列表。当我在列表中执行print时：
print(preds_labels)
我获得：
[(0.,8.),(0.,13.),(0.,19.),(0.,19.),(0.,19.),(0.,19.),(0.,19.),(0.,20.),(0.,21.),(0.,23.)]
但是，当我想使用以下命令创建一个DataFrame时：
df = sqlContext.createDataFrame(preds_labels, ["prediction", "label"])
我收到一条错误消息：
不支持的类型:键入“numpy.float64”
浏览 1提问于2016-08-07得票数 7
回答已采纳
我有一个pandas.DataFrame，它包含来自乌尔都语各种新闻文章的数据，我正在使用自然语言工具包(NLTK)来浏览它，以便在我的n-gram语言模型中使用。为此，我首先必须对数据进行令牌化，该数据存储在'News Text'列中的my pandas.DataFrame中，然后将其存储在将用于查找n克的列表中。但是，我拥有的数据非常大，111,862行(准确地说)，使用'for'循环遍历pandas.DataFrame是非常慢的，迭代特定列中的所有行并将它们存储在列表中需要超过30分钟。
for i in range(0, len(dataframe)):
浏览 12提问于2022-10-29得票数 -1
假设我有一个带有序列C的pandas dataframe，其中每个值都是一个列表。由于每个列表的长度不同，如何分割此系列并将其附加到此DataFrame的新列中？
其他发现:从[，和‘开始，每个字母都附加到整个列表中(包括空格以分隔单词)
我应该怎么做才能将字母组合成一个单词，然后应用解决方案？
示例df -
id A B C
0 1 2 ['Alan', 'Rod', 'Ben']
1 1 3 ['Jeff']
浏览 0提问于2020-10-14得票数 0
1回答
main_list=[
['1', '2', '3'],
['800800', '802100', '800905'],
['Kartoffel -FESTKOCHEND-', 'Princes/Belana', '(1 x 25 kg./Sack)', 'Orangen, Press-/Saftorangen', '(1 x 90er-St./Ktn.)', 'Möhren
浏览 5提问于2022-01-13得票数 0
我对Pandas/Python很陌生，但我熟悉excel，我想要完成的实际上是一个v查找。我有一个合同编号列表，需要进行比较，以确定列表A中的每个项目是否都在列表B中，如果列表中的项目已与列表A中的项目匹配，则无法再次匹配。
coll = []
coll = pd.DataFrame(coll)
coll = coll.append([cardpay, achpay])
audit0 = []
audit0 = coll["Policy #"]
audit0 = audit0.dropna()
audit0 = pd.
浏览 6提问于2021-09-10得票数 1
回答已采纳
我在dataframe中有一个列表列，如下所述。
df=pd.DataFrame({'a':["a,b,c"]})
df：
a
0 a,b,c
df.a.astype(str).values.tolist()
['a,b,c']
但我希望输出格式为"a“、"b”、"c“。有没有人能帮我弄一下代码。
浏览 13提问于2019-07-25得票数 1
回答已采纳
1回答
我有一个包含文本条目dataframe['text']的数据框架，以及要为该函数计算的特性列表。虽然并不是所有的特性都适用于所有的文本条目，所以我尝试计算所有可能的内容，而不需要手动检查哪个条目对哪个条目起作用。因此，我希望循环在错误点之后继续：
with Processor('config.yaml', 'en') as doc_proc:
try:
for j in range (0,len(features)):
for i in range (0, len(dataframe['t
浏览 5提问于2022-01-31得票数 0
回答已采纳
1回答
n=sc.shape(A)[0]
sim=sc.eye(n)
I=sc.eye(n)
P= normalize(A, norm='l1', axis=0)
Q=P*(1-np.exp(-A))
A是由代码创建的邻接矩阵：
df=pd.read_csv('training.csv')
G=nx.from_pandas_dataframe(df,'node1','node2','weight')
A
浏览 2提问于2017-12-02得票数 0
回答已采纳
我有一个很简单的问题，但我很难实现我想要的。我有一个看起来像这样的DataFrame：
base
[a,b,c]
[c,d,e]
[a,b,h]
我想删除每个列表中的第二个元素，因此我将得到以下内容：
base
[a,c]
[c,e]
[a,h]
我想有一种简单的方法可以做到这一点，但是在DataFrames中处理列表并不常见，所以我什么也找不到。
提前谢谢。
编辑: DataFrame只是一个列，它由相同长度的列表组成。我需要删除一个元素，因此列表的长度与它将成为的DataFrame的列数相同。
浏览 0提问于2018-10-02得票数 1
回答已采纳
2回答
我有一个dict，我想把它融化成一个pandas DataFrame。
d = {'a':['1','2','3'], 'b':['cat','dog','bird'], 'c':['75','23','49']}
当所有列表都具有相同的长度时，该方法可以工作，并且我得到了所需的输出。
pd.DataFrame(d).melt()
退出：
variable value
0 a
浏览 0提问于2019-02-15得票数 1
回答已采纳
我已经在Python中加载了一个表作为dataframe，我想检查是否所有变量的长度都符合支持表中每个变量的长度。 我加载的表(表1)的结构是这样的Table 1 指示变量应该有多长的表(表2)如下：Table 2 我希望对应表1中每列的每一行的长度作为表2中的长度，并创建一个Flag，以便当该行的条件不满足时，我将得到1，否则为0 Example 我不是专家，所以我尝试了以下代码： new = pd.Dataframe()
for c,f in zip(Table2['variable'],Table2['length']):
if f == Tab
浏览 15提问于2019-09-26得票数 2
回答已采纳
我有一个大的数据集要分析，我需要查看多个特性的不同值(标志)。我试图按以下方式运行一个for循环：
d= {}
name_list = ["ultfi_ind", "status"] # Add names of columns here
for x in name_list:
d["{0}".format(x)] = test_df.select(x).distinct().collect() # Please change df name
dist_val = pd.DataFrame.from_dict(d)
在
浏览 7提问于2022-10-26得票数 0
回答已采纳
1回答
我正在编写一个函数，该函数从基于ID#的API中检索数据，然后将json响应读取到一个pandas数据帧中，对该数据帧进行格式化，最后将每个数据帧编译在一起。目标是将一系列pandas的ID#传递到函数中，以检索数千个ID列表的相关数据。 当我手动执行每一步时，这些步骤都可以工作。我得到了一个很好的单行pandas数据帧，其中包含我想要的所有列和值。当我在一个包含for循环的函数中组合所有步骤时，它停止工作。 以下是步骤： req = Request('https://gs-api.greatschools.org/schools/3601714/metrics') ##re
浏览 20提问于2021-08-30得票数 0
1回答
我有一个星火数据集加载在内存和持久化到拼花文件。有一个UI应用程序，用户可以在其中定义要在Dataset的特定列中填充的值。它可以是一个公式，其中的值将取决于同一Dataset Row的不同列中的值。
最初，我考虑了蛮力解决方案，想要迭代抛出列表并更新某些列值，但它可能效率很低。
List listOfRows = dataframe.collectAsList()；
for(Row oneRow : listOfRows) {
// Process every single Row
}
然后我尝试使用Dataset.withColumn(.)api：
for (String cn : cv
浏览 10提问于2022-08-30得票数 0
如何才能在dataframe的每一列中找到最后一次出现的非零元素？
输入
A B
0 0 1
1 0 2
2 9 0
3 10 0
4 0 0
5 0 0
输出
A B
0 10 2
浏览 0提问于2019-06-19得票数 11
回答已采纳
1回答
MPI发送和重构
、、
我的第一个进程创建了一个链接的结构列表，我希望将列表中的一个元素发送到每个进程。在其他进程中接收到元素后，我需要将一个网格传递给callMethod()。在发送MPI之前，我需要先转换这些文件吗？
struct grid {
int g[N][N];
};
typedef struct s_grids {
struct grid grid;
int start;
struct grids* next;
} grids;
(...MPI_Initialization...)
grids* gridList;
if (rank == 0
浏览 1提问于2022-06-07得票数 0
在我的工作执行期间，我想在执行的每一步建立一个熊猫DataFrame，它的内部状态。我想这样做，因为我希望以后能够使用DataFrame进行一些分析。因此，这就是上下文:我从一个空的DataFrame开始，在作业完成所有数据生成之后，最终的DataFrame大小最多是7GB。
以下是我尝试过的方法：
我可以维护一个列表列表，我的工作一直在该列表中添加新的行。最后，我运行了类似于：df = pd.DataFrame(rows, columns=list("abc"))。这是最快的方法，但在内存使用方面是非常浪费的。我不再使用列表列表，而是继续调用df = df.append([{
浏览 2提问于2020-06-20得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
