如何在sql server中用NULL替换Dataframe中的nan？
在SQL Server中，可以使用ISNULL函数将Dataframe中的NaN值替换为NULL。
ISNULL函数用于判断一个表达式是否为NULL，并在表达式为NULL时返回指定的替换值。以下是使用ISNULL函数替换Dataframe中的NaN值的示例：
UPDATE 表名
SET 列名 = ISNULL(列名, NULL)其中，"表名"是要更新的表的名称，"列名"是要替换NaN值的列的名称。
例如，假设有一个名为"my_table"的表，其中包含一个名为"my_column"的列，需要将该列中的NaN值替换为NULL，可以使用以下SQL语句：
UPDATE my_table
SET my_column = ISNULL(my_column, NULL)这将会将"my_table"表中"my_column"列中的所有NaN值替换为NULL。
请注意，以上示例中的SQL语句仅适用于SQL Server数据库。如果使用其他数据库，可能需要使用不同的语法或函数来实现相同的功能。
推荐的腾讯云相关产品：腾讯云数据库SQL Server，产品介绍链接地址：https://cloud.tencent.com/product/sqlserver
相关·内容
我有一个dataframe，并且dataframe值被更新到SQL Server中的一个表中。但是，nan值存储为nan而不是NULL。 在SQL server中替换为NULL的正确方法是什么？ 下面是这段代码。 # This does not work (Replacing nan with NULL)
outputData = outputData.where(pd.notnull(outputData), None)
updatesql = """ update dbo.table set
[col1] = ? ,
浏览 50提问于2020-12-03得票数 0
回答已采纳
2回答
我从一个文件中读取并做了一些预处理，加载了一个熊猫DataFrame --它有几列数字。比如
value
1 13654654328.4567895
2 NULL
3 54643215587.6875455
为了不损失准确性，我计划在SQL Server中将其存储为数字。由于我不希望Pandas将数据转换为浮点型，因此我将其作为字符串加载，然后使用df.to_sql()将其插入到SQL中。
如果不存在NULL，它工作得很好。但是，如果它包含null，则无论我将"“或np.nan作为null，它都会报告错误："Error conve
浏览 3提问于2018-09-12得票数 4
我有一个带有新冠肺炎相关数据的DataFrame。
下面是所述数据的一个示例行
('Afghanistan', 'Confirmed', None, None, None, None, None, '2020-03-28', 1, 110.0, 100, 7, '2020-11-03'),
我以下列方式建立连接：
quoted = urllib.parse.quote_plus("DRIVER={.../msodbcsql17/lib64/libmsodbcsql-17.6.so.1.1};SERVER=******;
浏览 2提问于2020-11-06得票数 0
回答已采纳
假设我有这个dataframe和这个代码来将我的数据插入到数据库中：
import pandas as pd
import pyodbc
REFERENCE = ["GZF882348G", "SFGUZBJLNJU", "FTLNGZ242112", "DFBHGVGHG543", "H353464508749","H353464508749","H353464508749","H353464508749", "H353464508749",
浏览 1提问于2020-11-30得票数 1
回答已采纳
1回答
我有一台SQL Server，其上有我想使用pandas来更改数据的数据库。我知道如何使用pyodbc将数据放入DataFrame中，但是我不知道如何将该DataFrame放回我的SQL Server中。 我试图用sqlalchemy创建一个引擎并使用to_sql命令，但我无法让它工作，因为我的引擎永远不能正确地连接到我的数据库。 import pyodbc
import pandas
server = "server"
db = "db"
conn = pyodbc.connect('DRIVER={SQL Server};SERVER='+
浏览 16提问于2019-04-19得票数 1
回答已采纳
因此，我使用None对象来定义熊猫数据中的空值。这是带有NaN和None的dataframe中行的一个示例。
27 XXX None 41.0 NaN 1.0 50.0 NaN 1.0 71.0 3.0 0.9826382611 162.0 3.0 0.9952958893 MTD
当我在dataframe中插入None时，它变成了NaN，当插入到Teradata中的一个小整数
浏览 3提问于2019-12-04得票数 2
回答已采纳
1回答
上下文
从MS SQL Server导出的CSV在多个列中具有"NULL“值
预期结果
将“NULL”替换为“None”，因为数据是多数据类型的--这是一个中间步骤，然后根据列的数据类型，选择性地将None替换为0、‘U已知’等等。
试过
df[['Col1', 'CCol1']].replace(to_replace = ['NULL', ' '], value=None, inplace = True)似乎删除了行entirelydf[['Col1', 'CCol1']].replace
浏览 1提问于2020-06-12得票数 0
1回答
我正试图通过.txt将一个大型SQL Server 2012文件通过SSIS package加载到SQL Server 2012数据库中的表中，这是通过SQL Server Import Wizard创建的。
我的一些数字列包含一些"NaN“文本值，我希望将它们转换为NULL。我只是不知道如何在向导或保存的SSIS package中指定这一点。
注意：.txt文件太大了，我无法用空格替换"NaN“(我不能在计算机上安装任何像Notepad++这样的程序)，然后启用RetainNulls。
是否可以将"NaN“指定为'NULL'？
浏览 1提问于2015-01-28得票数 0
回答已采纳
我想在Pandas中用'‘替换null：
final_data.replace("null","")
在dataframe中，null将替换为NaN。使用final_data.fillna(" ") NaN不替换为'‘。任何帮助都将不胜感激。
no ip
20457 NaN
20458 NaN
20459 NaN
20460 NaN
20461 127.0.0.1
20462 NaN
浏览 2提问于2017-10-06得票数 0
回答已采纳
我有一个小的pyhton代码，它用一个(或多个) nans构建一个dataframe，然后用psycopg2模块使用copy_from函数将它写到postgres数据库中。下面是：
table_name = "test"
df = pd.DataFrame([[1.0, 2.0], [3.0, np.nan]], columns=["VALUE0", "VALUE1"], index=pd.date_range("2000-01-01", "2000-01-02"))
database = "xxxx
浏览 6提问于2020-09-30得票数 1
回答已采纳
举个例子，我有一个df
from pyspark.sql import Row
row = Row("v", "x", "y", "z")
df = sc.parallelize([
row("p", 1, 2, 3.0), row("NULL", 3, "NULL", 5.0),
row("NA", None, 6, 7.0), row(float("Nan"), 8, "NULL", float("NaN&
浏览 9提问于2017-12-06得票数 0
回答已采纳
2回答
我遇到过这样的情况:我的列中可能有空值，需要在一个组中求和。 如果我在组中遇到null，我希望该组的和为null。但是默认情况下，Pyspark似乎会忽略null行，并对其余非NULL值求和。 例如： ? dataframe = dataframe.groupBy('dataframe.product', 'dataframe.price') \
.agg(f.sum('price')) 预期输出为： ? 但我得到的是： ? 任何建议都会有帮助！ 提前感谢！
浏览 87提问于2021-01-18得票数 1
回答已采纳
我正在使用csv + df.to_csv将SQL数据库导出到df.to_csv中，存在一个问题，即整数字段在DataFrame中表示为浮点数。
我的代码：
conn = pymysql.connect(server, port)
chunk = pandas.read_sql_query('''select * from table''', conn)
df = pandas.DataFrame(chunk) # here int values are float
df.to_csv()
我正在以这种方式导出许多表，问题是int字段被导出
浏览 5提问于2021-06-16得票数 0
回答已采纳
1回答
我有两个数据：
purchases = pd.DataFrame([['Alice', 'sweeties', 4],
['Bob', 'chocolate', 5],
['Alice', 'chocolate', 3],
['Claudia', 'juice', 2]],
columns=[
浏览 0提问于2020-11-25得票数 2
回答已采纳
3回答
我在一个数据帧中有一个名为null的奇怪列，其中包含其他列中缺少的一些值。一列是名为location的经度坐标，另一列是表示名为level的目标变量的整数。在某些(但不是所有) location或level缺少值的情况下，应该存在的值都在此null列中。下面是一个df示例： pd.DataFrame(
{'null': {0: '43.70477575,-72.28844073', 1: '2', 2: '43.70637091,-72.28704334', 3: '4', 4: '3'
浏览 15提问于2020-09-07得票数 1
回答已采纳
1回答
我正在使用一个dataframe，它有一个列，其中所有的值都是空的。默认情况下，此列的dtype为object。我需要它是一个整数类型，可能是int64。为什么无关紧要，这就是我所需要的。
我试过以下几种方法：
df['field'] = df['field'].astype(int)
这不管用。错误是：
ValueError:无法将NA转换为整数
insert_data['data_set_key'] = pd.to_numeric(insert_data['data_set_key'], errors='coe
浏览 9提问于2016-06-07得票数 1
1回答
我对潘达斯很陌生，不知道该如何做以下几件事：
我有一个有几个列的dataframe (df)。一个列被称为
OldCat = ['a-nn', 'bb-nm', 'ab-pp', 'ba-nn', 'cc-nm', 'ca-mn']
现在，我想创建一个新的列，它以新的方式组织/分类OldCat (NewCat)。具体来说，我想在OldCat中查找包含a(开头)、ba或ca j =‘^a_x-ba_ca’的字符串，然后在NewCat中的OldCat包含j的行中用'A‘替换nan。在R中，这可能
浏览 2提问于2016-07-19得票数 1
回答已采纳
1回答
我是Python的新手，有一个我不知道如何解决的问题。我有一个dataframe (localdf["where_condition"])，它包含以下值：
0 FirstName ='sonali'
1 Gender='F'
2 NaN
职能：
def filter_record_count_check(localdf):
try:
sql = 'select count(*) as CNT from ' + localdf["sch
浏览 6提问于2022-07-25得票数 -1
回答已采纳
如何在Python中的PANDA数据中插入行？我目前正在从一个查询示例data = pd.read_sql_query (query, con)加载数据，该数据具有以下结构：
timestamp data1 data2
1515581720 12 23
1515581721 23 34
1515581723 45 34
1515581724 45 23
我想知道，是否可以在Panda库的dataframe中插入从mysql获得的信息的新行。在前一种情况下，注册"1515581722“丢失，
应该是：
timestamp data1 data2
1515581720 12 23
1515
浏览 2提问于2018-01-10得票数 0
2回答
我有一个表，其中包含日期、标识符和价格。
| Identifier | Date | Price |
|------------|----------|-------|
| 693477AA|1990/10/31| 100|
| 353477ZB|1991/08/31| 101|
| 123457ZB|1992/08/31| 105|
我使用熊猫函数从Server数据库中获取数据。无论是使用SQL还是熊猫DataFrame功能，我都需要将数据转换成下面的熊猫DataFrame格式。
693477AA 353477ZB
浏览 3提问于2017-08-03得票数 1
回答已采纳
假设我有这个数据帧： REFERENCE = ["GZF882348G", "SFGUZBJLNJU", "FTLNGZ242112", "DFBHGVGHG543"]
IBAN = ["FR7343563", "FR4832545", "FR9858331", "FR2001045"]
DEBIT = [26, '', 856, '']
CREDIT = ['', 324, '', 876]
MONT
浏览 240提问于2020-11-30得票数 2
回答已采纳
1回答
我有一只熊猫的数据，而且我没有得到任何的价值。我需要将它写到server，并希望用Null更新它。我怎么能这么做？
我不能用df.to_sql写到DB，它非常慢。所以我使用pymsql。我将dataframe值转换为元组，并形成sql语句。因此，我不可能有一个，南，NAT等，甚至需要清除它之前，写信给元组。
self.sqlconn = pymssql.connect(server=self.server, user=self.username, password=self.password,database=self.database)
code for writing to sql db
浏览 7提问于2022-06-28得票数 1
2回答
我有两个熊猫数据框架，如下所示。列“否”是一个常见的字段。基于“否”，我希望替换第一个数据帧列“总计”中的值。
条件是：在任何时候'No‘匹配，从dataframe2中获取'Marks1’值，然后在'Total‘列中替换。如果'Marks1‘为空，则获取'Marks2’值并在‘Marks2’中替换。如果两者都为空(Marks2 1/Marks2 2)，则在“Total”列中用空替换。最后的结果应该在数据frame1中。这两个数据帧都有几十万条记录。
Data frame1
No|Total
1234|11
2515|21
3412|32
4854|
77
浏览 3提问于2020-06-09得票数 1
回答已采纳
我当前的代码只能将完整的数据帧加载到SQL server表中。如果列OpSeq中有一些空值。如何更改当前代码以接受空值。 import pandas as pd
import pyodbc
# Import CSV
data = pd.read_csv(r'C:\Users\moin\Desktop\MM\XXK.csv')
df = pd.DataFrame(data, columns['Order','Number','Group','ActualStartDate','ActualCompl
浏览 13提问于2021-07-02得票数 0
我有以下数据，我想使用它将行插入到中
new_companies = pd.DataFrame(columns=["Id","Name","CreatedDate","ModifiedDate","IsActive","No","SIMSId"])
# Insert two rows
new_companies = new_companies.append({
"Id":999999,
"Name":"Unknown",
&
浏览 6提问于2021-02-10得票数 1
回答已采纳
我在Apache Spark SQL中有一个DataFrame，我想删除所有not None值都相同的列。 所以在一个虚拟的例子中 df
| A | B | C |
1 2 3
NaN 2 4
1 2 NaN
1 2 5 我只想保留C列 df_filter
| C |
3
4
NaN
5 在Python中，我将通过以下方式完
浏览 25提问于2021-10-27得票数 2
回答已采纳
我有以下DataFrame结构
clientID month savings
0 10 2 15
1 20 2 2
2 30 2 10
3 40 2 5
4 50 2 7
5 60 2 9
6 10 3 10
7 20 3 10
8 30 3
浏览 3提问于2017-09-01得票数 1
回答已采纳
如何使用查找和替换对话框在VS或SQL Server Management Studio中用换行符替换一个字符(或多个字符)？
浏览 2提问于2010-08-25得票数 19
回答已采纳
我正在尝试将.csv文件的内容插入Server数据库中。我可以插入列，它在我的csv文件中没有nulls。没有几个列具有很少的blanks，因此我无法与其他列一起插入这些特定列。我做了一张这样的桌子；
CREATE TABLE [main].[table1](
[Record_ID] [int] IDENTITY(1,1) NOT NULL,
[account_id] [nvarchar](max) NULL,
[business_name] [nvarchar] (max) NULL,
) ON [PRIMARY] TEXTIMAGE_ON [PRIMARY]
如前所
浏览 7提问于2022-02-20得票数 0
回答已采纳
我的DataFrame中的一些列具有<NA>的实例，这些实例的类型为pandas._libs.missing.NAType。
我想用NaN替换它们，使用np.nan。
我看到了一些问题，在使用<NA>时，可以替换pd.read_csv()的实例。
但是，由于我的Pandas DataFrame是从火花DataFrame创建的，所以我不使用pd.read_csv()函数。
请指点。
浏览 4提问于2021-09-27得票数 5
1回答
我有一个MWE，可以用以下代码复制：
import pandas as pd
a = pd.DataFrame([[1,2],[3,4]], columns=['A', 'B'])
b = pd.DataFrame([[True,False],[False,True]], columns=['A', 'B'])
它创建以下数据文件：
In [8]: a
Out[8]:
A B
0 1 2
1 3 4
In [9]: b
Out[9]:
A B
0 True False
1 Fa
浏览 3提问于2016-10-04得票数 1
回答已采纳
我有一个固定列计数的数据格式：A B C D E MMYY
Dataframe是这样创建的：
pd.DataFrame(colsValue)
还有一个列名的完整列表：[A,B,C,D,E, MMYY, AGE, COUNTRY]
如何在dataframe中创建其他列并从full list中通过rest填充它们。
初始数据集看起来如下：
A B C D E
1 2 3 4 5
之后应该看
A B C D E MMYY AGE COUNTRY
1 2 3 4 5 Null Null Null
基本解决办法如下：
for dfName, df in dict_of_dfs.items():
浏览 17提问于2022-05-25得票数 1
我有这样一个数据格式的df1。
我想根据不同的名称，在另一个dataframe nan中用多个值填充0和score列中的数字df2。
我怎么能这么做？
浏览 3提问于2017-08-25得票数 1
回答已采纳
2回答
我试图将我的数据推入SQL中，但它一直告诉我，我的一列是无效的数据类型float。
sqlalchemy.exc.ProgrammingError: (pyodbc.ProgrammingError) ('42000', '[42000] [Microsoft][ODBC Driver 13 for SQL Server][SQL Server]The incoming tabular data stream (TDS) remote procedure call (RPC) protocol stream is incorrect. Parameter 29 (
浏览 26提问于2022-11-07得票数 1
4回答
在我的DataFrame中，我首先用nan替换大于某个值的值，然后创建另一个具有相同列名的DataFrame，并用随机数填充它。然后，我用新创建的DataFrame更新原始的nan，但是在我第一次设置列nan的值的行中，所有其他列都变成了nan。在该列中包含nan的原始行没有相同的问题。下面是我在pandas语法中的意思： df[df['column_name'] > 40] = np.nan
column_series = df['column_name']
null_indices = column_series[column_series.isnu
浏览 28提问于2018-08-17得票数 0
回答已采纳
8回答
我想用NaN替换dataframe列中的坏值。
mydata = {'x' : [10, 50, 18, 32, 47, 20], 'y' : ['12', '11', 'N/A', '13', '15', 'N/A']}
df = pd.DataFrame(mydata)
df[df.y == 'N/A']['y'] = np.nan
但是，最后一行失败并抛出一个警告，因为它正在处理df的副本。那么，处理这件事的正确方法是什么？我见
浏览 11提问于2016-01-14得票数 158
回答已采纳
1回答
我有一个Pandas DataFrame，它包含两组坐标(lat1、lon1、lat2、lon2)。我有一个函数，用这些坐标来计算距离。但是dataframe中的一些行无效。我只想将函数应用于有效的行，并将函数的结果保存到“dist”列(该列已经存在于dataframe中)。我想要这样的SQL：
UPDATE dataframe
SET dist=calculate_dist(lat1, lon1, lat2, lon2)
WHERE lat1 IS NOT NULL AND lat2 IS NOT NULL AND user_id>100;
我怎样才能做到这一点？
我尝试使用df =
浏览 5提问于2016-12-30得票数 3
回答已采纳
1回答
例如：
import pandas as pd
df_1 = pd.DataFrame({"A":[1, 5, 3, 4, 2],
"B":[3, 2, 4, 3, 4],
"C":[2, 2, 7, 3, 4],
"D":[4, 3, 6, 12, 7]})
df_2 = pd.DataFrame(index = list(range(5)),columns = ['a','c&#
浏览 1提问于2019-11-08得票数 2
回答已采纳
给出了熊猫的DataFrame：
user item rating
1 3 2
1 4 5
2 1 5
3 5 1
3 1 3
4 4 4
4 1 1
....
我想将其转换为numpy数组，其中用户列为y轴，item列为x轴，如下所示：
1 2 3 4 5
1 nan nan 2 5 nan
2 5 nan nan nan nan
3 3
浏览 7提问于2016-03-08得票数 1
回答已采纳
3回答
我有这样的数据集：
import pandas as pd
# initialize data of lists.
data = {'name':['x', 'y', 'z'],
'value':['fb', 'nan', 'ti']}
# Create DataFrame
df = pd.DataFrame(data)
现在，我想检查value的列，如果value没有'fb‘和'nan’(null值)，则计数行数。
我该怎么做
浏览 9提问于2022-05-05得票数 0
我希望获得所有变量的最新非空值。例如，在这个数据集中，我们有3个服务日期。
import pandas as pd
df =pd.DataFrame( {'PatientID': [1, 1, 1],
'Date': ['01/01/2018', '01/15/2018','01/20/2018'],
'Height': ['Null', '178', 'Null'],
'Weight': ['Null', '
浏览 0提问于2018-02-11得票数 5
回答已采纳
2回答
如何在熊猫数据中添加带有默认值的额外列？
请参阅以下代码：
userID = "narendramodi"
tweets = api.user_timeline(screen_name=userID,
# 200 is the maximum allowed count
count=500,
include_rts = True,
# Necessary to k
浏览 0提问于2021-04-12得票数 0
回答已采纳
1回答
将列与整数和字符串相乘
、、、、
我有一个包含50+列的大型DataFrame。我想将每一列乘以另一列，但是数据中存在一些字符串。
df[df.loc[:, df.columns != "Total Balance"].columns].multiply(df["Total Balance"], axis="index")
df.loc[:, df.columns != "Total Balance"操作使我不会将总余额乘以其本身。
我的问题是DataFrame中的一些元素是字符串，因此我得到了错误：
TypeError: can't multiply s
浏览 19提问于2019-07-24得票数 0
回答已采纳
我有一个带有一些NaN值的DataFrame，我想要与我的DataFrame的平均值相适应 data.fillna(data.mean()) 然后，我检查是否有任何NaN或null值 print('is nan', data.isna().values.any()) #prints True
print('is null', data.isnull().values.any()) #prints True 之前打印为true，我不理解，因为NaN值应该被填充。 我是不是遗漏了什么？
浏览 24提问于2019-06-02得票数 1
回答已采纳
2回答
我想要一个函数，如果区域列有缺失值(如SQL中的NULL )，则结果在目标“wanted”变量中为“A”。 我对Python中的None、isnull()和np.nan概念的使用感到困惑 raw_data = {'area': ['S','W',np.nan,np.nan], 'wanted': [np.nan,np.nan,'A','A']}
df = pd.DataFrame(raw_data, columns = ['area','wanted'])
df
浏览 8提问于2020-04-05得票数 0
回答已采纳
我将csv读入Spark，并将模式设置为所有DecimalType(10,0)列。当我查询数据时，我得到以下错误：
NumberFormatException: Infinite or NaN
如果我的dataframe中有NaN/null/INFINIT值，我想将它们设置为0。我该怎么做呢？这就是我试图加载数据的方式：
var cases = spark.read.option("header",false).
option("nanValue","0").
option("nullValue","0").
op
浏览 0提问于2017-06-01得票数 3
我正在尝试转换python数据类型，以便可以使用sp_execute_external_scripts过程通过sql server返回它们。有些专栏特别给了我一些问题。样本数据：
>>> df.column1
0 NaN
1 1403
2 NaN
3 NaN
4 NaN
使用在另一个答案()中找到的方法，我创建了一个函数来完成这个任务并返回一个新的系列。
def str_convert(series):
null_cells = series.isnull()
return series.astype(
浏览 1提问于2020-11-04得票数 2
1回答
我需要使用SQL炼金术将数据从熊猫导出到。许多列都是字符串，缺少值，还有一些非常长的整数，例如999999999999999999999999999999999。这些数字是某种外键，所以值本身并不意味着什么，所以我可以将它们转换为字符串。
当试图导出到SQL时，这会导致SQL炼金术中出现以下错误：
OverflowError: int too big to convert
我尝试使用astype(str)将字符串转换为string，但随后遇到了一个问题，即标识为nans的缺失值被转换为字符串“nan”--因此SQL不将它们视为空值，而是将其视为字符串'nan‘。
我找到的唯一解决方案是
浏览 2提问于2017-11-16得票数 11
回答已采纳
我想要StandardScaler (通过SK学习)某些DataFrame，它包含了大量的NaN值，在执行这个标量转换之后，我想将所有NaN分配给-1。既然我们知道StandardScaler不适用于NaN值，这是怎么可能的？
如果有任何其他解决方案(它不依赖于，Scikit，学习)，也请提到这一点。
df = pd.DataFrame(StandardScaler().fit_transform(values_to_scale.values))
我收到以下错误消息：
ValueError: Input contains NaN, infinity or a value too large f
浏览 0提问于2018-06-17得票数 2
回答已采纳
我使用sqlalchemy工具将Pandas大容量插入到Microsoft中：
my_engine = create_engine(url.URL(**my_db_url))
Session = sessionmaker(bind=my_engine )
my_session = Session()
start = time.time()
my_session.bulk_insert_mappings(TableObject, mysample)
my_session.commit()
durata = time.time() -start
my_session.close()
在这里，mys
浏览 0提问于2019-12-10得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
