Pandas: print if not NaN (列)
Pandas是一个开源的数据分析和数据处理工具，它提供了强大的数据结构和数据分析功能，特别适用于处理和分析大型数据集。
在Pandas中，可以使用isna()函数来判断数据是否为NaN（缺失值），然后通过逻辑取反操作（~）来筛选出非NaN的数据。最后，使用print()函数将筛选后的数据打印出来。
以下是一个示例代码：
import pandas as pd
# 创建一个包含NaN的DataFrame
data = {'A': [1, 2, float('nan'), 4, 5],
'B': [float('nan'), 2, 3, 4, 5]}
df = pd.DataFrame(data)
# 打印非NaN的数据
print(df[~df.isna()])这段代码将打印出所有非NaN的数据行，结果如下：
A B
0 1 NaN
1 2 2.0
3 4 4.0
4 5 5.0这里使用了~df.isna()来筛选非NaN的数据，~表示逻辑取反操作。
Pandas的优势在于它提供了丰富的数据操作和处理功能，可以轻松地进行数据清洗、转换、分析和可视化。它还具有高效的数据结构，如Series和DataFrame，以及灵活的索引和标签功能，使得数据处理更加方便和直观。
Pandas在数据分析、机器学习、金融等领域都有广泛的应用场景。例如，可以使用Pandas来处理和分析大型数据集，进行数据清洗和预处理，计算统计指标，绘制数据可视化图表等。
腾讯云提供了云服务器、云数据库、云存储等多个产品，可以满足云计算的各种需求。具体推荐的腾讯云产品和产品介绍链接地址可以参考腾讯云官方网站：https://cloud.tencent.com/
相关·内容
2回答
我将pandas数据帧的一部分转换为numpy数组，并希望用列的平均值填充它的值，类似于我在pandas中执行以下操作： df.fillna(df.mean(), inplace = True) 到目前为止，我唯一能做到的方法就是对列进行迭代。还有别的办法吗？ 谢谢!
浏览 11提问于2021-09-18得票数 2
回答已采纳
我尝试过以下几种说法：
import pandas as pd
df = pd.DataFrame(index=[i for i in range(5)])
df.columns = ["res"+str(i) for i in range(5)]
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
File "C:\Python35\lib\site-packages\pandas\core\generic.py", lin
浏览 33提问于2020-02-13得票数 1
回答已采纳
基于直接附加两个具有不同列数的dataframe的事实，错误将作为pandas.io.common.CParserError: Error tokenizing data. C error: Expected 4 fields in line 242, saw 5出现。如何使用pandas避免此错误？？
我想出了一个天真的方法:只处理原始数据，使列数相等。
它还能更优雅吗？？我认为缺少的列可以在pd.append之后用np.nan填充。
浏览 10提问于2017-02-23得票数 1
回答已采纳
我是Python和pandas的新手。我创建了一个数据帧，并希望计算两列之间的百分比变化。我知道pandas中的pct_change函数，但它在行之间工作。 import pandas as pd
import matplotlib.pyplot as plt
UKnewcars = pd.DataFrame({
'Model': ["Diesel", "MHEV Diesel", "Petrol", "MHEV petrol","BEV", "PHEV", "
浏览 81提问于2021-10-11得票数 0
1回答
我有一个包含3个序列和一个时间轴的pandas时间序列对象。我想训练一个带有时间窗口的神经网络，因此我需要创建一个由不同移位的重复pandas列组成的矩阵。我可以用pandas.concat手动完成，但这样做需要很长时间，而且灵活性也不高。我现在尝试的是：
# Make 40 columns with the original dataframe first column and
# make 20 columns with the original dataframe second column
param_array = pandas.DataFrame()
for i in range(
浏览 3提问于2015-06-04得票数 4
我有下表
我希望使用python将int转换为矩阵，如下所示：
我能知道从哪里开始的方向吗？我使用熊猫来读取两个数据，并将它们合并以创建我所显示的初始表(其中一个有两列)。
下面是我使用的代码：
import pandas as pd
from pyexcelerate import Workbook
import numpy as np
import time
start = time.process_time()
excel_file = 'Test.xlsx'
df = pd.read_excel(excel_file, sheet_name=0, i
浏览 0提问于2019-09-01得票数 2
回答已采纳
我有多个列的Pandas DataFrame，我想检查特定的列值是否为NaN，如果是，我需要返回布尔值(真或假)。
我试过了
pandas_df['col1'].isnull()
但是它返回所有带有索引和布尔值的行。
浏览 4提问于2019-05-21得票数 0
回答已采纳
我的DataFrame中的一些列具有<NA>的实例，这些实例的类型为pandas._libs.missing.NAType。
我想用NaN替换它们，使用np.nan。
我看到了一些问题，在使用<NA>时，可以替换pd.read_csv()的实例。
但是，由于我的Pandas DataFrame是从火花DataFrame创建的，所以我不使用pd.read_csv()函数。
请指点。
浏览 4提问于2021-09-27得票数 5
4回答
如何计算没有NaN的列数？
import pandas as pd
df = pd.DataFrame(columns = ['name', 'age', 'favorite_color', 'grade','NaN'])
print(len(df.columns))
输出：5
但外观输出:4
浏览 0提问于2019-07-21得票数 1
2回答
我试图将多个文本文件编译成一个数据框架。但是，当我使用Pandas Concat函数加入数据帧时，生成的数据帧的形状会添加新的列。在下面的代码示例中，数据框架3有12列，而不是8列。为什么？
**Input:**
import pandas as pd
df1 = pd.read_csv('2011-12-01-data.txt',sep = None, engine = 'python')
df2 = pd.read_csv('2011-12-02-data.txt',sep = None, engine = 'python'
浏览 1提问于2017-06-24得票数 4
回答已采纳
2回答
我得到了以下pandas.DataFrame，其中列value是输入数据，group是所需的输出。 import pandas as pd
import numpy as np
df = pd.DataFrame({'value': [0.1, 0.2, np.nan, 0.2, 0.3, 0.5, np.nan, 0.1],
'group': [1, 1, np.nan, 2, 2, 2, np.nan, 3]}) 我想为用np.nan分隔的每个连续数字段分配一个唯一的ID。我可能需要一些聚类方法来实现这一点，但我还找
浏览 17提问于2020-10-08得票数 0
回答已采纳
我有一个奇怪的问题，我还没有找到一个可行的解决方案。我在Python中使用Pandas。 我在Pandas数据帧中有三列，例如： x y z
3 6 9
5 nan 4
4 nan nan
nan nan nan 我想创建第四个列，它在每一行中选择列x y z的最低可能值，并在新列中报告它，或者如果缺少，则简单地报告'nan‘。 预期输出将如下所示： x y z lowest
3 6 9 3
5 nan 4 4
4 nan nan 4
nan nan nan nan 我真的不
浏览 12提问于2019-03-05得票数 1
回答已采纳
1回答
只读某些列
、、、
我只想从excel文件中读取某些列到熊猫的数据中。我想通过usecols通过列范围来指定这一点，但是遇到了一个错误。将列范围指定为字母的正确方法是什么(是的，我知道我可以提供列指示符)？
import pandas as pd
df = pd.read_excel("test.xlsx", usecols="A:AV", header=None)
~/anaconda3/lib/python3.5/site-packages/pandas/io/excel.py in read_excel(io，sheetname，header，skiprows，skip_f
浏览 2提问于2017-11-15得票数 2
回答已采纳
4回答
我有一个pandas数据帧(1413行)和一个numpy数组(1412行)。
type(df1)
Out[193]: pandas.core.frame.DataFrame
df1.shape
Out[194]: (1413, 15)
type(arr1)
Out[195]: numpy.ndarray
arr1.shape
Out[196]: (1412, 3)
我想用arr1 + nan中的列填充df1中的列，但它不起作用
df1['aaa'] = np.vstack((np.nan, arr1[:,0]))
有人能告诉我怎么做吗？
浏览 1提问于2020-03-24得票数 0
2回答
从dict制作数据
、、、
我有这样的数据：
>>> cc
defaultdict(<class 'dict'>, {1540272960: {'max': 1.14614, 'to': 1540273020, 'close': 1.14606, 'from': 1540272960, 'open': 1.145935, 'volume': 96, 'id': 366597, 'min': 1.14593, 'at': 1540273
浏览 2提问于2018-10-23得票数 2
回答已采纳
我正在尝试从一个DataFrame生成一个列来作为我的分组的基础。我知道，非NaN列下的每个NaN列都属于同一个组。所以我写了这个循环(参见下面)，但我想知道是否有更多的熊猫/琵琶的方式来用申请或理解列表来写它。
import pandas
>>> DF = pandas.DataFrame([134, None, None, None, 129374, None, None, 12, None],
columns=['Val'])
>>> a = [0]
>>> for i i
浏览 2提问于2016-10-17得票数 0
回答已采纳
pandas.Grouper被认为只用于约会吗？或者它也可以用于整数吗？
我想结合使用pandas.Grouper和pandas.pivot_table。下面是一个示例，说明如何对包含pandas.Grouper的列使用dates
import pandas
import numpy
from datetime import datetime
date_data_frame = pandas.DataFrame(
{
"date": [
dateti
浏览 2提问于2020-09-22得票数 3
回答已采纳
pandas中是否有一个方法/内置函数，允许根据列的名称将多个列合并为一个列？ 例如，取这3列，其中每一行将仅具有单个非NaN值 +-------+-------+-------+
| name1 | name2 | name3 |
+-------+-------+-------+
| a | NaN | NaN |
| b | NaN | NaN |
| NaN | c | NaN |
| NaN | d | NaN |
| NaN | NaN | e |
| NaN | NaN | f |
浏览 8提问于2021-10-04得票数 0
在pandas中，有没有一种优雅的方法可以基于数据帧中的多个列来赋值？假设我有一个包含2列的数据帧: FruitType和Color。
import pandas as pd
df = pd.DataFrame({'FruitType':['apple', 'banana','kiwi','orange','loquat'],
'Color':['red_black','yellow','greenish_yellow', 'o
浏览 0提问于2017-09-11得票数 1
我正在尝试从网页中将文本文件的内容导入到熊猫数据中。
但是，当我尝试使用下面的代码导入并打印列名时，我会得到以下错误。
import pandas as pd
df = pd.read_csv(
"http://cs.joensuu.fi/sipu/datasets/s1.txt",
index_col=None,
sep=" "
)
这将导致以下错误：
File "/Users/user/Desktop/Folder/Src/spiral.py", line 8, in <module>
df =
浏览 4提问于2021-11-09得票数 1
回答已采纳
我有一个相当大的数据集，有200行和6000+列。
我已经知道了用每列的平均值替换NaNs的Pandas函数：
df.fillna(df.mean())
我的问题是，我只想在NaNs总数等于或小于3的列上使用它。任何提示或解决方案都将非常感谢。
浏览 7提问于2020-02-04得票数 0
回答已采纳
2回答
将列向量转换为多列矩阵
、、、
我有一个列向量，比如30个值(1-30)，我想尝试操作这个向量，以便它成为一个矩阵，第一列中有5个值，第二列中有10个值，第三列中有15个值。我将如何使用Pandas或NumPy来实现这一点？
import pandas as pd
#Create data
df = pd.DataFrame(np.linspace(1,20,20))
print(df)
1
2
:
28
29
30
为了得到这样的东西：
# Manipulate the column vector to make columns where the first column has 5
# the second co
浏览 3提问于2021-03-08得票数 2
回答已采纳
我正在尝试创建一个Pandas DataFrame，每一列都是单个股票的百分比变化，按日期编制索引。我很难接受百分比变化，将其添加到空的DataFrame中，并将该列命名为股票符号。
import pandas as pd
import pandas.io.data as web
from pandas import Series, DataFrame
stocks = {'xom': '2014-01-01', 'dvn': '2013-01-01', 'aapl': '2013-01-01'}
浏览 4提问于2015-08-12得票数 2
回答已采纳
我有一个DataFrame，它有两列：int列和str列。
我理解如果将NaN插入到int列中，Pandas将将所有的int转换为float，因为int没有NaN值。
但是，当我将None插入到str列中时，Pandas也会将我的所有int转换为float。这对我来说毫无意义--为什么我在第2栏中输入的值会影响第1列？
下面是一个简单的工作示例)：
import pandas as pd
df = pd.DataFrame()
df["int"] = pd.Series([], dtype=int)
df["str"] = pd.Series([
浏览 10提问于2016-10-26得票数 52
回答已采纳
我已经找遍了所有地方，但我仍然找不到如何在Pandas Dataframe的组中创建两个移位列的示例。
我已经用了一个专栏，如下所示：
data_frame['previous_category'] = data_frame.groupby('id')['category'].shift()
但我必须使用两列，一列向上，另一列向下。
有什么想法吗？
浏览 14提问于2019-11-14得票数 1
回答已采纳
对于对列，如果第一列中的值为nan，则希望将第二列的值替换为nan。我试过但没有成功
>import pandas as pd
>
> df=pd.DataFrame({'a': ['r', np.nan, np.nan, 's'], 'b':[0.5, 0.5, 0.2,
> 0.02], 'c':['n','r', np.nan, 's' ], 'd':[1,0.5,0.2,0.05]})
>
>listA
浏览 16提问于2017-05-23得票数 2
回答已采纳
1回答
我试图比较两个数据格式，下面的图片显示了Pandas ()函数的结果。现在，我试图总结结果，并希望计数所有不匹配的值，即NaN =正确。我知道如何访问列，但不知道“子列”self / other。
浏览 4提问于2022-05-05得票数 0
如何在pandas数据帧中填充NaN值？我的数据是这样的
id state zone
xxx AP south
xxx AP
xxx AP
xxx AP
xxx delhi north
xxx delhi
xxx delhi
xxx delhi
xxx delhi
基于已知zone只属于state的AP列，如何在south列中填充缺失的值，如何使用pandas来填充值？
浏览 4提问于2020-01-21得票数 0
我的问题是泛型。好吧，再试一次。我想要一个在第一列a中包含每月日期的数据。THen，我想遍历这些日期并填充第b行和第c行中的值。
import pandas as pd
from pandas import *
import datetime as dt
#try to generate a dataframe with dates
#This ist the dataframe, but how can I fill the dates
dfa = pd.DataFrame(columns=['date', '1G', '10G'])
p
浏览 7提问于2022-11-22得票数 0
回答已采纳
我很难理解为什么下面的代码不能工作。假设我有下面的dataframe，它有一个类型为string的列，该列可以包含任意长度的字符串。我想用南替换所有只包含'0‘的字符串。
d = {'col1': ['carlo', 'luca', 'nanni', 'nanno', 'john' ],
'col2': ['0000', '00', '0', '10000D','CO0123&#
浏览 3提问于2020-05-18得票数 1
回答已采纳
我有一个包含许多列的pandas dataframe，其中大多数列都是空的，但是对于每一行，总是有且只有一列的值是字符串。
我在dataframe中创建了一个新列，它选择了唯一的非空值：
data[label] = data.iloc[:,0]
for col in range(1,100) :
data[label] = data[label].fillna(data.iloc[:,col])
这很好用，但是，我还可以跟踪这些列中的哪一列是每个条目的非null，以便列标签也包含该信息。如何知道哪一列是非空的？
Ex.
col0 col1 col2
浏览 0提问于2017-06-16得票数 1
我有两个数据帧。df1是空的数据帧，而df2有一些数据，如下所示。在这两个dfs中，有一些列是相同的。我想将df2数据框列数据追加到df1数据框的列中。df3为预期结果。 我已经推荐了Python + Pandas + dataframe : couldn't append one dataframe to another，但没有正常工作。出现以下错误: ValueError:计划形状未对齐 df1： Empty DataFrame
Columns: [a, b, c, d, e]
Index: [] ` df2： c e
0 11 55
1 22 66 df3
浏览 34提问于2019-04-25得票数 0
回答已采纳
4回答
我想确定.csv文件中的每个列都是多满，请按照每个列的填充顺序将它们添加到列表中。丰满度应以百分比表示。
.csv文件非常大，因此确定哪些列包含少量数据，哪些列包含最多将是有用的。因此，拥有更多数据的列将对我更有用。
到目前为止我得到的是：
import pandas as pd
ranked_list = []
csv_filepath = r"some_path_here"
data = pd.read_csv(filepath)
for column in data:
way_to_calculate_perce
浏览 1提问于2019-09-05得票数 3
回答已采纳
1回答
我在pandas dataframe中有一个类似这样的列，我想将它转换为多个列a、b、c、d {"a":false,"b":false}
{"a":false,"b":false,"c":true}
nan
{"a":false}
{"a":true,"d":true} 我试过了： ops = ops.join( pd.DataFrame(json.loads(d) for d in ops.pop('json_column')) ) 但是它会创建
浏览 13提问于2020-04-19得票数 1
回答已采纳
我正在尝试运行我认为很简单的代码来消除所有can的列，但无法使其工作(axis = 1在消除行时工作得很好)：
import pandas as pd
import numpy as np
df = pd.DataFrame({'a':[1,2,np.nan,np.nan], 'b':[4,np.nan,6,np.nan], 'c':[np.nan, 8,9,np.nan], 'd':[np.nan,np.nan,np.nan,np.nan]})
df = df[df.notnull().any(axis = 0)]
pri
浏览 3提问于2017-07-27得票数 29
回答已采纳
上一次我尝试将nan放入Pandas数据帧中时，它迫使我将列类型从int改为float。
据我所知，在SQL中，任何类型的列中都没有'NULL‘的问题。我正在处理的数据帧经常进出SQL。
现在我有了一个包含int、object和float列的数据帧，需要创建一些代码来编程添加一些单行，其中7列中的6列应该不包含任何内容，并且7列中只有1列被赋值。
在Pandas中，有没有其他标准的'NULL‘东西可以放在不是float类型的列中？
这一次，我肯定不能仅仅为了在其中放入一个nan而改变列的类型。
浏览 6提问于2018-02-28得票数 0
2回答
我正在使用Pandas / Python中的DataFrame，每一行都有一个ID (这不是唯一的)，我想修改dataframe，为每一行添加一个具有多个匹配ID的列。
Starting with:
ID Name Rate
0 1 A 65.5
1 2 B 67.3
2 2 C 78.8
3 3 D 65.0
4 4 E 45.3
5 5 F 52.0
6 5 G 66.0
7 6 H 34.0
8 7 I 2.0
Trying to get to:
ID Nam
浏览 5提问于2016-02-13得票数 3
回答已采纳
我有一个Pandas dataframe列，它的数据行如下：
col1
abc
ab23
2345
fgh67@
8980
我需要创建另外两个列col2和col3，如下所示：
col2 col3
abc 2345
ab23 8980
fgh67@
我使用过str.isnumeric()，但在数据框列中这对我没有帮助。有人能帮上忙吗？
浏览 0提问于2018-07-03得票数 3
我有一个使用案例，我得到了更大的csv文件，需要在三列标签上执行groupby，并且需要对特定列的匹配行值求和，如果它是一个整数，如果它是一个应该替换为“NA”的字符串，我尝试使用pandas来继续，不确定这是否需要在内存中执行任何操作。 Import pandas as pd
df = pd.read_csv(“input.csv")
data = df.groupby([‘X’,’Y’,’Z’])[‘ADJ’].sum()
print(data) input.csv.. ? Output.csv(数据帧) ?
浏览 44提问于2020-04-29得票数 0
回答已采纳
3回答
我有两个数据文件(df1和df2)，我想按如下方式追加它们：
df1和df2有一些共同的列，但我想附加存在于df2中的列，而不是df1中的列，而是保留df1的列，因为它们是，df2是空的(所有行都是nan)
我可以在df1中添加列，但在将来，df2可能会添加新的cols，这就是为什么我不想硬编码列名，而是自动完成的原因。我以前经常使用附加，但我得到了以下消息
df_new = df1.append(df2)
FutureWarning: The frame.append method is deprecated and will be removed from pandas in a fut
浏览 10提问于2022-08-22得票数 2
回答已采纳
import pandas as pd
df = pd.DataFrame(
[
[5, 2],
[3, 5],
[5, 5],
[8, 9],
[90, 55]
],
columns = ['max_speed', 'shield']
)
df.loc[(df.max_speed > df.shield), ['stat', 'delta']] \
= 'overspeed', df['
浏览 3提问于2022-10-13得票数 3
我正在尝试跨Pandas数据帧的列进行求和，当每列中都有NaN时，我得到的结果是sum =0；根据文档，我预期sum =NaN。下面是我得到的信息：
In [136]: df = pd.DataFrame()
In [137]: df['a'] = [1,2,np.nan,3]
In [138]: df['b'] = [4,5,np.nan,6]
In [139]: df
Out[139]:
a b
0 1 4
1 2 5
2 NaN NaN
3 3 6
In [140]: df['total'] =
浏览 0提问于2015-10-31得票数 33
2回答
新行基于其他行的过去值到当前值
、、、、
我正在尝试创建一个名为move in df的新列，它给出了1的值(如果在x is higher中的值大于其先前的值)和0 (如果是value is lower )，因此move中的第一个值应该是NaN。
d = {'x': [1, 0, 2, 5, 4]}
df = pandas.DataFrame(d)
该列应该如下所示：
df['move'] = pandas.Series([NaN, 0, 1, 1, 0])
浏览 5提问于2016-06-27得票数 1
回答已采纳
1回答
我有这个形式的pandas数据帧：
A B C D
car 100 EUR T
train 20/r25 EUR/rUSD F
e-bike 10/r21 EUR/rGBP F
我想拆分这个/r符号上的那些列(包含该符号的列)，这样其他列就会重复，如结果df所示：
结果df：
A B C D
car 100 EUR T
train 20 EUR F
train 25 USD F
e-bike 10 EUR F
浏览 17提问于2019-11-27得票数 1
回答已采纳
拥有这个DataFrame：
import pandas
dates = pandas.date_range('2016-01-01', periods=5, freq='H')
s = pandas.Series([0, 1, 2, 3, 4], index=dates)
df = pandas.DataFrame([(1, 2, s, 8)], columns=['a', 'b', 'foo', 'bar'])
df.set_index(['a', 'b'],
浏览 1提问于2016-06-01得票数 8
回答已采纳
我很难使用pandas.DataFrame的构造函数和dtype参数，我想保留字符串值，但是下面的片段总是转换成数字类型，然后生成NaN。
from __future__ import unicode_literals
from __future__ import print_function
import numpy as np
import pandas as pd
def main():
columns = ['great', 'good', 'average', 'bad', 'horrible&#
浏览 1提问于2016-09-20得票数 1
回答已采纳
在pandas文档()中，下面是使用groupby和get_letter_type函数的示例。为什么描述的结果不包括列'B'？
In [5]: def get_letter_type(letter):
...: if letter.lower() in 'aeiou':
...: return 'vowel'
...: else:
...: return 'consonant'
...:
In [6]: grouped = df.groupby(get
浏览 1提问于2016-05-21得票数 2
我正在使用pandas将csv文件加载到数据框中。 下面是一个数据帧示例： X Y
1 4
2 5
3 6 我想将这两列追加到一个新的列中： X Y Z
1 4 1
2 5 2
3 6 3
4
5
6 如何使用python来实现
浏览 12提问于2020-07-27得票数 0
我希望根据Pandas中另一列中的值，对一列中的值进行求和。见下图。
在一栏(A)中是1或0的值，在B栏中是值。每次第一列中的值=1时，我都需要在两个1之间的第二列中添加(Sum)值。
换句话说，在两个事件之间(由一个事件指示)，我需要添加发生的其他事情的总数(列b)。
浏览 5提问于2017-11-06得票数 2
回答已采纳
1回答
例如，我有一个数据框 df = pd.DataFrame([(np.nan, .32), (.01, np.nan), (np.nan, np.nan), (.21, .18)],
columns=['A', 'B'])
A B
0 NaN 0.32
1 0.01 NaN
2 NaN NaN
3 0.21 0.18 我想从A中减去B列 df['diff'] = df['A'] - df['B']
A
浏览 24提问于2021-01-15得票数 4
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
