我有2个Pandas dfs，A和B，有一些匹配的列，但行数不同。我想根据一些条件将匹配列的值从B复制到A。我已经尝试过了：
s1 = pd.Series([5, 1, 'a'])
s2 = pd.Series([6, 2, 'b'])
s3 = pd.Series([7, 3, 'd'])
s4 = pd.Series([8, 4, 'e'])
s5 = pd.Series([9, 5, 'f'])
df1 = pd.DataFrame([list(s1), list(s2),list(s3),list(s4)
浏览 29提问于2018-08-25得票数 1
我试图将长度(行数)不匹配的列添加到数据帧中，它抛出了一个错误，
DimensionMismatch(“新列目标的长度为60000必须与数据帧中的行数匹配(47040000)")
我的代码片段是，
df = DataFrame(:Feature => train_x, :Target => train_y)
#train_x has 47040000 rows
#train_y has 60000 rows
请针对此问题提出解决方案。提前谢谢你。
浏览 0提问于2020-12-31得票数 4
1回答
我正在计算R中的返回值，并试图将其添加到我正在处理的当前数据帧中，但由于行数不同而无法工作，其中as现有行数为194行，分配的数据行数为193行。
这段代码在单独执行时工作得很好：
diff(log(capm$price_Ford))
但是，当我尝试将它作为自己的列分配到dataframe中时，我得到了一个错误
capm$ford_ret <- diff(log(capm$price_Ford))
如何将193行的数据分配给194行的dataframe？
浏览 0提问于2020-11-24得票数 0
我必须使用相同的列进行数据帧。我的任务应该是在不接触第一列('A')的情况下从df_nap中减去df_tot。最简单的解决方案是什么？
谢谢!
import numpy as np
import pandas as pd
df_tot = pd.DataFrame(np.random.randint(10, size=(3,4)), columns=list('ABCD'))
df_nap = pd.DataFrame(np.random.randint(10, size=(3,4)), columns=list('ABCD'))
浏览 87提问于2018-06-03得票数 0
回答已采纳
问题:在试图安装Jabber时出现了以下错误。这似乎是一个通用错误。我有一种感觉，这个问题类似于这个帖子。我创建了一个错误报告，这样维护人员就可以帮助或者包含任何来自这个方面的修复。
DatabaseSchemaObjectExistsException:表jabber已经存在。在DatabaseSchema->createTable()中(public_html/d7/include/database/schema.inc第657行)。
背景:我有一个OpenFire服务器正在运行，我很好奇与Drupal 7和O.F的集成。这个帖子谈论的是同样的事情。XMPP框架模块是给D6的。D7的
浏览 0提问于2012-09-25得票数 1
回答已采纳
我有两种类似的数据
Dataframe 1：
ID classification
1 MISS
2 MISS
3 CORRECT
4 MISS
5 CORRECT
Dataframe 2：
ID classification
1 CORRECT
2 CORRECT
3 MISS
4 MISS
5 CORRECT
我希望每次得到数据集1和数据集2之间的分类列中的值不匹配的索引号。数据集具有相似的长度，其余的列也
浏览 2提问于2022-10-06得票数 1
回答已采纳
假设我将一个索引列附加到一个DataFrame，如下所示：
def addSequentialIndex(
sc: SparkContext,
df: DataFrame,
id: String) : DataFrame = {
val sqlContext = new org.apache.spark.sql.SQLContext(sc)
sqlContext.createDataFrame(
df.rdd.zipWithIndex.map {
case (row: Row, i: Long) =
浏览 3提问于2017-04-24得票数 0
我已经创建了下面的方法，它以两个Dataframes；lhs和rhs及其各自的第一和第二列作为输入。该方法应该使用为每个dataframe提供的两列返回这两个帧之间的左联接的结果(忽略它们的大小写敏感性)。
我面临的问题是，它正在做更多的内部连接。它正在返回lhs数据帧中的行数的3倍(由于rhs中的重复值)，但由于它是左联接，所以rhs数据帧中的重复和行数应该无关紧要。
def leftJoinCaseInsensitive(lhs: DataFrame, rhs: DataFrame, leftTableColumn: String, rightTableColumn: String,
浏览 2提问于2017-11-01得票数 2
回答已采纳
如何在python dataframe中随机选择和赋值给给定的行数。列B只包含1和0。假设我有一个数据帧，如下 Col A Col B
A 0
B 0
A 0
B 0
C 0
A 0
B 0
C 0
D 0
A 0 我的目标是随机选择5%的行，并将列B的值更改为1。我看到了df.sample()，但这不允许我就地更改列数据
浏览 174提问于2020-07-24得票数 0
4回答
在我的DataFrame中，我首先用nan替换大于某个值的值，然后创建另一个具有相同列名的DataFrame，并用随机数填充它。然后，我用新创建的DataFrame更新原始的nan，但是在我第一次设置列nan的值的行中，所有其他列都变成了nan。在该列中包含nan的原始行没有相同的问题。下面是我在pandas语法中的意思： df[df['column_name'] > 40] = np.nan
column_series = df['column_name']
null_indices = column_series[column_series.isnu
浏览 28提问于2018-08-17得票数 0
回答已采纳
1回答
我下载了几个模块更新。在此之前，我没有禁用模块。这样可以吗？我现在在我的状况报告中看到以下情况：
数据库更新已过时，有些模块需要安装数据库架构更新。您应该立即运行数据库更新脚本。
现在运行数据库更新脚本对我来说安全吗？还是我应该先做一个核心更新(目前正在运行7.18，并将升级到7.19)？
浏览 0提问于2013-02-06得票数 0
回答已采纳
我正在开发一个应用程序，其中我使用了、JDBC、和Oracle11。
我的表tbltest中有数十万条记录，我正在通过JDBC批处理执行来更新这些记录。因此，将其看作是一个id =一个查询。
My Requirement:，我想跟踪哪些id已成功更新，哪些id在db中不存在。
以下是我的代码：
String sql = "UPDATE TBLTEST SET STATUS = 'CANCEL' WHERE ID = ?";
PreparedStatement preparedStatement = null;
Connection connection = ge
浏览 3提问于2015-12-26得票数 5
回答已采纳
我正在尝试创建一个新的Dataframe，用于存储现有Dataframe的行数。
size = df.shape[0]
我正在尝试创建新的数据帧，但收到错误ValueError: DataFrame constructor not properly called!
浏览 9提问于2019-11-01得票数 1
回答已采纳
3回答
我有熊猫DataFrame。我想计算满足条件的行数。
数据有800行；data[data['cond'] == 1]返回帧有343行。我需要在一个变量中存储行数。我该怎么做呢？
浏览 0提问于2016-02-08得票数 4
我希望提取数据文件的最小行数，以覆盖某些列的所有元素。下面是一个例子：
条件:新的dataframe的checklist1覆盖(a，b，c)；新的dataframe的checklist2覆盖(α，β，delta，gamma)；新的dataframe的project_id覆盖(proj1，proj2，proj3)；
解决办法：
我试图用枚举来解决这个问题。最后，我放弃了这个方法，进行了大量的计算。
浏览 1提问于2019-06-18得票数 0
回答已采纳
我想知道有多少‘用户’会被插入到‘阶梯’中
这就是我得到的：
INSERT INTO ladder (id, text, createdAt)
SELECT id, text, createdAt
FROM users
WHERE invisible=0
AND createdAt >= $today
LIMIT $maxValue
感谢您的帮助：)
浏览 0提问于2016-06-15得票数 0
3回答
我有这样的数据集：
import pandas as pd
# initialize data of lists.
data = {'name':['x', 'y', 'z'],
'value':['fb', 'nan', 'ti']}
# Create DataFrame
df = pd.DataFrame(data)
现在，我想检查value的列，如果value没有'fb‘和'nan’(null值)，则计数行数。
我该怎么做
浏览 9提问于2022-05-05得票数 0
很长一段时间以来，我一直在努力寻找解决方案。我正在使用pandas和matplotlib来编写一个绘图库。我目前正在纠正设计中的一个错误，这个错误是使用字符串而不是时间戳。这是一个错误的原因之一，因为它阻止了任何简单的方法来填充丢失的时间戳。
我们的目标是创建一个堆叠条形图，该条形图看起来类似于下图，但只包含时间戳的一部分。(HH:MM、YYYY-MM-DD、YYYY-MM等)此条形图是使用常规的熊猫索引生成的。
df = pd.read_csv('/path/to/file.csv', index_col='ts')
-还没有足够的代表来嵌入图像
在将我的索
浏览 27提问于2018-12-04得票数 4
我在一个名为“DataFrame”的变量中有一个myDataFrame，如下所示：
+---------+-----+-------+-----
| Type | Count | Status |
+---------+-----+-------+-----
| a | 70 | 0 |
| a | 70 | 0 |
| b | 70 | 0 |
| c | 74 | 3 |
| c | 74 | 2 |
| c
浏览 8提问于2020-06-05得票数 0
回答已采纳
我有一个输入文件。
cat文件
ABC 2 3 4
DEF 3 4 5
FRD 3 5 6
input<-read.table(file)
我想将它加载到dataframe中，在dataframe中，名称是键，值是一行数字的向量，这样我就可以获得值。
如何在dataframe中动态存储数据？
浏览 1提问于2013-02-21得票数 0
回答已采纳
6回答
我有一个包含nan的列的数据格式。我想删除那些有一定数量nan的专栏。例如，在下面的代码中，我希望删除2或更多nan的任何列。在这种情况下，列'C‘将被删除，只有'A’和'B‘将保留。我如何实现它呢？
import pandas as pd
import numpy as np
dff = pd.DataFrame(np.random.randn(10,3), columns=list('ABC'))
dff.iloc[3,0] = np.nan
dff.iloc[6,1] = np.nan
dff.iloc[5:8,2] = np.nan
prin
浏览 5提问于2015-06-18得票数 20
回答已采纳
我想要找出在DataFrame对象的所有列中具有特定值的行数，例如None、""或NaN (基本上为空值)。我该怎么做呢？
浏览 117提问于2018-09-28得票数 1
回答已采纳
我试图用两个键在字典中阅读，第一个键有一个字符串值，第二个键有一个字符串值列表。包含列表的值可以(而且通常是)为空。例如：
{'number': '50', 'box': []}
然而，当我尝试使用DataFrame.from_dict时，它给了我一个空的DataFrame。我注意到，如果“box”列表包含多个元素，DataFrame.from_dict将为我提供一个包含多行的DataFrame，每个值对应于框列表中的每个值。这似乎是一种跨产品行为。是否有一种方法可以抑制这种行为，以便从上面的示例中生成一个DataFrame，其中"num
浏览 3提问于2015-09-10得票数 2
回答已采纳
1回答
我想知道在MySQL (InnoDB)中的事务中修改的所有表是否都锁定了整个事务？
我有一个会话，更新版本表中的“最新版本”，然后为新版本的几个GBs创建一个新表。另一个会话持续地获取最新版本的数据，然后获取该最新版本的数据；我发现这个会话有时会返回0行数据。
下面是SQL中的一个简化示例：
第1场会议
假设我们已经有了一个表data_v41，而version_table中的latest_version是41。此会话将数据更新为最新版本。
BEGIN TRANSACTION;
-- Increment the latest version...
UPDATE version_table SE
浏览 4提问于2016-06-15得票数 0
回答已采纳
我通常使用一个函数来生成一个upsert语句，将一个dataframe (逐行)提供给Postgres。这看起来像预期的那样工作，但是我注意到串行列有一个新的编号分配给它们。这是我想要的还是我应该改变什么？所以，我最早的行，比如第1行，现在可能是第30行、128行或什么的。
def create_update_query(final_columns, primary_key, table):
"""This creates an UPSERT statement to replace values if there is a conflict with the
浏览 1提问于2017-10-12得票数 1
回答已采纳
1回答
我正在使用Spring JDBCTemplate batchUpdate在批处理中插入数据。我想验证数据是否插入成功。JDBCTemplate batchUpdate返回一个int，那么验证数据是否已插入的正确方法是什么？
这个写道：“所有批处理更新方法都返回一个整数数组，其中包含每个批处理条目的受影响行数。这个计数是由JDBC驱动程序报告的，在这种情况下，JDBC驱动程序只返回-2值，并不总是可用的”。我无法理解在这里返回-2值的意义。这是否意味着插入不成功？
浏览 0提问于2013-10-07得票数 8
回答已采纳
1回答
我有一个DataFrame df1，列为A、B和D。
| A | B | D |
-------------
| 1 | 5 | 3 |
| 2 | 3 | 1 |
和一个DataFrame df2，列为B和C。
| B | C |
---------
| 0 | 2 |
| 3 | 5 |
它们的行数相同。
我想从细胞上减去它们(df1 - df2)。但是它们中的每一个都有另一个没有的列。
我所针对的结果DataFrame如下所示：
| A | B | C | D |
------------------
| 1 | 5 | -2 | 3 |
| 2 | 0 | -5 | 1 |
这很容易
浏览 0提问于2017-06-13得票数 0
回答已采纳
目标是为每个组在数据帧中采样(不替换)不同数量的行。特定组要采样的行数在另一个数据帧中。
示例: idDF是要从中采样的数据帧。组由ID列表示。数据帧planDF指定要为每个组采样的行数，其中"datesToUse“表示行数，"ID”表示组。"totalDates“是该组的总行数，可能有用，也可能无用。
最终结果应该是从第一组(ID 1)中采样3行，从第二组(ID 2)中采样2行，从第三组(ID 3)中采样1行。
val idDF = Seq(
(1, "2017-10-03"),
(1, "2017-10-22"),
(1,
浏览 25提问于2018-03-02得票数 3
回答已采纳
2回答
我有2个dataframes df1和df2 (相同的索引和行数)，我想要创建一个新的dataframe，其中的列是来自df1和df2的所有2列组合的总和，例如：
输入:
import pandas as pd
df1 = pd.DataFrame([[10,20]])
df2 = pd.DataFrame([[1,2]])
输出:
import pandas as pd
df3 = pd.DataFrame([[11,12,21,22]])
浏览 9提问于2022-01-20得票数 2
回答已采纳
我有一个ViewController，它创建一个新对象，然后回到FirstViewController.m中，我有一个展开方法，它应该用新对象的一行来更新tableView。使用reloadData方法将无法工作，因为它会重新加载所有单元格，这会影响到我在这些单元格中的方法。我只想添加一个新的单元格，而不重新加载整个tableView。我的展开方法如下所示：
-(IBAction)unwind:(UIStoryboardSegue *)segue {
ABCAddItemViewController *source = [segue sourceViewController];
浏览 3提问于2014-06-17得票数 2
2回答
简单的问题:我在dask中有一个数据帧，其中包含大约3亿条记录。我需要知道dataframe包含的确切行数。有什么简单的方法可以做到这一点吗？
当我尝试运行dataframe.x.count().compute()时，它看起来像是试图将整个数据加载到内存中，内存中没有空间，它崩溃了。
浏览 1提问于2018-03-16得票数 11
3回答
我有一只熊猫DataFrame -
>>> import numpy as np
>>> import pandas as pd
>>> data = pd.DataFrame(np.random.randint(low=0, high=2,size=(5,3)),
... columns=['A', 'B', 'C'])
>>> data
A B C
0 0 1 0
1 1 0 1
2 1 0 1
3
浏览 2提问于2015-12-14得票数 9
回答已采纳
1回答
我有一个sales DataFrame，它有28M行，还有一些其他数据帧，还有一个示例Product DataFrame。
当我第一次将pandas数据帧转换为Dask数据帧时：
sales_dd = dd.from_pandas(Sales, npartitions=3) #28M rows
product_dd = dd.from_pandas(Product, npartitions=3) #600 rows
转换Dask Dataframe后，我可以使用；
sales_dd.tail()
Date ProductNo Total_
浏览 2提问于2018-05-27得票数 1
3回答
我正在尝试使用逻辑运算符对整个dataframe进行数据过滤，而NA行却在子设置的dataframe中爬行。我已经通过了和，但是我无法找到或找到解决方案。
df <- data.frame(number1 = c(1:5,-13,-2,-34,24,33), number2 = c(10:3, -73, -82))
df
df[df>=0 & !is.na(df$number2),]
我试图进行筛选，以便在原始数据框架中的任何行中没有负值。最后，我得到了18行df和多个NA行。
我尝试在df上使用sapply来检查逻辑操作是否正常。但是如果我用“哪个”来包装，我会得到所有的
浏览 7提问于2016-11-20得票数 0
回答已采纳
5回答
我注意到，如果dataframe的行名遵循从1到行数的顺序。使用as.matrix后，dataframe的行名将消失。但是，如果行名不是序列，则行名将重新出现。
下面是一个可重复的例子：
test <- as.data.frame(list(x=c(0.1, 0.1, 1), y=c(0.1, 0.2, 0.3)))
rownames(test)
# [1] "1" "2" "3"
rownames(as.matrix(test))
# NULL
rownames(as.matrix(test[c(1, 3), ]))
# [1] &#
浏览 21提问于2022-03-18得票数 5
回答已采纳
我想使用pandas.DataFrame.sample统一地从熊猫数据中抽取给定的行数。但是，我希望确保所选行的顺序不会与原始数据same中相同行的顺序相矛盾。我不知道如何做到这一点；行的顺序背后有一个物理意义，我想保留它。也许，与其对数据进行采样，不如将其称为沿其行轴抽取数据。你有什么建议？
注意：
最初的dataframe有83行。我需要创建两个分别为25行和24行的示例。
浏览 2提问于2022-05-25得票数 0
回答已采纳
from pandas import DataFrame
import numpy as np
Data={'First':[1,2,3,4,5,5],'Second':[6,7,8,9,10,4],'Third':[0,1,0,1,0,100]}
df=DataFrame(Data,columns=['First','Second','Third'])
这里有一个dataframe的例子。我想存储的结果是：
array([[ 1, 4],
[ 6, 9],
浏览 1提问于2019-06-28得票数 0
回答已采纳
1回答
我想用第二个dataframe的列命名dataframe的行。要命名的dataframe的行数与要用于命名的dataframe的行数相同。意味着第一个数据帧的第i行的名称应该具有第二个数据帧的列的第i个值的名称。 我已经尝试了以下几种方法： row.names(df1) <- as.character(df2[,1]) 这将导致df1的所有行都以dataframe2的向量中的第一个值命名。
浏览 9提问于2019-05-30得票数 0
1回答
我在Spark中有一个dataframe (通过读取csv创建)，如何在C#中遍历这个数据文件中的行。dataframe中有10行3列，在逐行导航时，我希望获得每个列的值。以下是我正在尝试的：
foreach (var obj in df)
{
Console.WriteLine("test");
}
foreach语句不能对“DataFrame”类型的变量进行操作，因为“DataFrame”不包含“GetEnumerator”的公共实例定义
浏览 4提问于2022-11-09得票数 0
回答已采纳
我想通过一些字段对DataFrame进行分组，比如
student_data.groupby(['passed'])
然后计算每个组内的行数。
我知道如何计算数值，比如
student_data.groupby(['passed'])['passed'].count()
或
student_data.groupby(['passed']).agg({'passed': 'count'})
但这将。我想分组计算所有的行数？
我发现我可以用以下命令计算整个DataFrame中的行数
len(studen
浏览 3提问于2016-07-10得票数 1
回答已采纳
3回答
我有一个很大的DataFrame，我需要将它分成两部分(A和B)，A和B中的某个列值的行数相同。该列有700多个唯一值，所有值都是字符串。我举个例子：
DataFrame
Price Type
1 X
2 Y
3 Y
4 X
5 X
6 X
7 Y
8 Y
在(随机)拆分时，我应该在DataFrame A和DataFrame B中获得两个X值和两个Y值，如下所示：
A
Price Type
1 X
5 X
2 Y
3
浏览 54提问于2020-05-13得票数 1
我有一个包含950万条记录的事实表。该表使用distyle=key，并托管在具有2个“小”节点的RedShift集群上。
我在表上执行了许多更新和删除操作，不出所料，我看到“实际”行数远远超过9.5M。
因此，我在表上运行了vacuum，令我惊讶的是，在vacuum完成后，我仍然看到表分配的“行数”没有回到950万条记录。
你能告诉我这种行为的原因是什么吗？
解决这个问题的最好方法是什么？
我的shell中的一些复制-粘贴：
我所说的事实表：
select count(1) from tbl_facts;
9597184
数据库中的“实际”记录数：
select * from stv_tbl_
浏览 0提问于2014-04-05得票数 1
我希望在大型网络(20k节点)中设置顶点属性。为了简单起见，这里有一个edgelist的示例：
library(igraph)
el <- matrix( c(1, 2,1,3,1,4,2,3,2,5,3,6,3,7,3,8,3,9,12,13,13,14 ), nc = 2, byrow = TRUE)
el[,1] = as.character(el[,1])
el[,2] = as.character(el[,2])
g = graph.data.frame(el,directed=FALSE)
另外，我有一个数据框架，如下所示：
ID = c(1,2,3,4,5,6,7,8,9,
浏览 2提问于2017-03-19得票数 0
回答已采纳
1回答
我有一个场景，其中我的dataframe有3列a、b和c。我需要验证所有列的长度是否都等于100。基于验证，我创建了状态列，如a_status、b_status、c_status，值分别为5(成功)和10 (失败)。在失败的情况下，我需要更新count并创建新的列a_sample，b_sample，c_sample，其中包含大约5个用"，“分隔的失败样本值。为了创建示例列，我尝试了如下所示
df= df.select(df.columns.toList.map(col(_)) :::
df.columns.toList.map( x => (lit(getSa
浏览 2提问于2018-10-01得票数 1
使用，我可以将DataFrame下采样到特定的持续时间：
df.resample("3s").mean()
然而，我不想指定一个特定的时间，而是指定原始数据帧中的固定行数，例如“重新采样，以便以前的三行现在聚合为一行”。这在熊猫身上是怎么可能的呢？
浏览 1提问于2017-06-01得票数 6
我有一个主键为BINARY(20)的非常大的表。
该表大约有1700万行。每小时一个cron作业都会尝试使用ON_DUPLICATE_KEY_UPDATE语法将多达50,000个新条目插入到此表中。
cronjob中的每个插入都有1,000个值(多个插入)。如何从这个查询中获得插入到表中的行数？我不能计算前后的行数，因为大约有1700万行，而且查询开销太大。
在手册中，mysql说，对于插入的行，受影响的行数是1，对于更新的字段，它是2，这意味着在我的1000 INSERT ON DUPLICATE KEY UPDATE查询中，我可能已经影响了1000 - 2000之间的行，但是我无法知道从这
浏览 4提问于2012-06-07得票数 9
回答已采纳
我正在做一个web抓取项目，如果我使用下面的#print命令，所有正确的代码都能以我想要的格式返回json数据，但是当我运行相同的代码时，除了通过Pandas Dataframe之外，它只返回我正在寻找的第一行数据。只要运行打印，它就会返回我要查找的预期17行数据。Dataframe to CSV只给我第一行。完全被难住了！非常感谢任何人的帮助！ for item in response['body']:
DepartureDate = item['legs'][0][0]['departDate']
ReturnDate =
浏览 38提问于2021-01-16得票数 3
目前，我提出了一些工作来计算熊猫DataFrame中丢失的值的数量。这些都很难看，我想知道是否有更好的方法来做到这一点。
让我们创建一个示例DataFrame
from numpy.random import randn
df = pd.DataFrame(randn(5, 3), index=['a', 'c', 'e', 'f', 'h'],
columns=['one', 'two', 'three'])
df = df.reind
浏览 10提问于2015-01-28得票数 39
回答已采纳
为了方便地将数据插入到Bokeh可视化代码片段中，我正在组织一个新的dataframe。我认为我的问题是由于不同的长度，但我不确定。
下面，我按国家名称按字母顺序组织了数据集，并创建了各个国家的字母列表。虽然津巴布韦列在最后，但有80336行，因此排序。
df_ind_data = pd.DataFrame(ind_data)
new_data = df_ind_data.sort_values(by=['country'])
new_data = new_data.reset_index(drop=True)
country_list = li
浏览 0提问于2018-12-12得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
