插入临时表中的重复行
是指在将数据插入临时表时，出现了与已存在的行数据完全相同的情况。这种情况可能会导致数据冗余和重复，影响数据的准确性和查询效率。
为了避免插入临时表中的重复行，可以采取以下几种方法：
- 使用唯一约束：在创建临时表时，可以为某些列添加唯一约束，确保这些列的值在表中是唯一的。当插入数据时，如果违反了唯一约束，数据库会抛出错误，插入操作将失败。
- 使用主键：为临时表指定一个主键，主键是唯一的标识符，可以确保表中的每一行都有唯一的标识。当插入数据时，如果违反了主键约束，数据库会抛出错误，插入操作将失败。
- 使用INSERT IGNORE语句：在插入数据时，可以使用INSERT IGNORE语句，它会忽略插入过程中出现的唯一键冲突错误，而不会中断插入操作。这样可以保证插入的数据不会重复，但是不会报错提示。
- 使用REPLACE语句：REPLACE语句可以用于插入数据或替换已存在的数据。当插入数据时，如果发现唯一键冲突，数据库会删除已存在的行，然后插入新的数据。这样可以确保插入的数据不会重复，并且可以更新已存在的数据。
- 使用MERGE语句：MERGE语句可以用于合并数据，将源数据合并到目标表中。在合并过程中，可以指定一些条件来过滤重复的数据，确保只插入唯一的数据。
腾讯云相关产品和产品介绍链接地址：
- 腾讯云数据库 TencentDB：https://cloud.tencent.com/product/tencentdb
- 腾讯云云服务器 CVM：https://cloud.tencent.com/product/cvm
- 腾讯云云原生容器服务 TKE：https://cloud.tencent.com/product/tke
- 腾讯云人工智能 AI：https://cloud.tencent.com/product/ai
- 腾讯云物联网 IoT Hub：https://cloud.tencent.com/product/iothub
- 腾讯云移动开发 MSDK：https://cloud.tencent.com/product/msdk
- 腾讯云对象存储 COS：https://cloud.tencent.com/product/cos
- 腾讯云区块链 TBaaS：https://cloud.tencent.com/product/tbaas
- 腾讯云元宇宙 QCloud Metaverse：https://cloud.tencent.com/product/metaverse
请注意，以上链接仅供参考，具体产品选择应根据实际需求进行评估和决策。
相关·内容
我目前有一个PHP脚本，它可以将数千到数百万行插入到InnoDB表中。为了防止重复，该表在四列的组合上设置了唯一的索引，我使用INSERT IGNORE允许insert继续，而不管重复的是什么。
出于性能方面的考虑，我不会一次插入一行，而是将它们分批到每个查询的2000行中。我想知道哪些行由于密钥冲突而被忽略，我认为唯一的方法是一次插入一行，然后在每次插入后检查mysqli_affected_rows的值，但这感觉效率低下，我将失去批处理插入的优势。或者，我可以删除唯一的索引，并在结束时使用一些SQL对重复进行回顾性检查。
还有其他建议吗？
非常感谢。
浏览 0提问于2018-01-05得票数 1
3回答
我正在尝试将大量数据插入到SQL server中。我的目标表有一个名为"Hash“的唯一索引。
我想将我的SqlDataAdapter实现替换为SqlBulkCopy。在SqlDataAapter中有一个名为"ContinueUpdateOnError“的属性，当设置为true adapter.Update(table)时，将插入所有可能的行，并使用RowError属性标记错误行。
问题是如何使用SqlBulkCopy尽可能快地插入数据，同时跟踪哪些行被插入，哪些行没有插入(由于唯一的索引)？
以下是补充信息：
--这个过程是迭代的，通常按计划设置为重复。源表和目标表可能很大，
浏览 3提问于2009-06-17得票数 10
回答已采纳
我有很多行数据要插入到一个表中。表中已有数据。当我像这样进行大容量插入时，
INSERT INTO permission(username, permission) values(('john','ticket_view'), ('john','ticket_modify'), ('john','ticket_approve'));
但是我的表已经有一个行john, ticket_view，在这种情况下，上面的insert查询以错误duplicate key value violates uniqu
浏览 6提问于2018-12-11得票数 2
我有9个表，每个表的值如下
Level_1_tab
Code Name
ae1 hdgdgd
ae2 dhdh
level_2_tab
code Name
2 jfjfjf
3 fkfjfjf
类似地，level_3_tab , level_4_tab, level_5表等等，直到level_9_tab。
我正在将code列插入到一个新表中，并检查重复项。
SELECT
code, name, COUNT(*)
FROM
new_table
GROUP BY
code, name
浏览 0提问于2016-06-15得票数 0
我有三个表，只有一个是我直接控制的，并且在它们之间执行一个MERGE。请参阅这里的简短但实用的示例()。
我在表1和表2到表3之间做了一个MERGE。表1有重复的数据，MERGE (错误地)可以在第一次运行时处理这些数据(插入)，但是在第二次运行(update)时该消息失败。
MERGE语句多次尝试更新或删除同一行。
我的问题是，是否可以将MERGE编写为使用EXCEPT (如
SELECT AdFull FROM [dbo].[Users] WHERE AdFull IS NOT NULL
EXCEPT
SELECT AdFull FROM [dbo].[Users]
浏览 4提问于2014-02-10得票数 1
回答已采纳
1回答
我在MySQL和Python MySQLdb库中有一个问题：
假设我想在DB中插入一个块。当我插入时，批量中的记录之间可能存在重复，或者批量中的记录可能与表中的记录重复。在重复的情况下，我想忽略重复，只插入块的其余部分。在批量中出现重复的情况下，我希望只插入其中一条记录(它们中的任何一条)，并插入批量的其余部分。
我怎么用MySQL语法写它呢？它是内置在Python语言的MySQLdb库中吗？
浏览 1提问于2014-05-13得票数 1
我的任务是插入超过1000行和4列。所讨论的表没有PK或FK。假设它包含ID、CustomerNo、Description列。需要插入的记录可以具有相同的CustomerNo和Description值。
我读到了将数据导入临时表、将其与真实表进行比较、删除重复项以及将新记录移到真实表中的相关内容。
我还可以使用1000个查询来检查这样的记录是否已经存在，如果不存在，则插入数据。但出于明显的原因，我不好意思试一试。
我没有期待任何特定的代码，因为我没有给出任何具体的细节。我希望的是一些伪代码或一般的建议来完成这样的任务。我等不及要给你一些支持了！
浏览 2提问于2015-08-18得票数 4
回答已采纳
我有一个包含3列的关系表
formsFields
[formID] [int] NOT NULL,
[fieldGUID] [varchar](50) NOT NULL,
[position] [int] NOT NULL
formID和fieldGUID列在索引/键中具有唯一约束。
目前我同时插入所有的关系，如下所示：
INSERT INTO formsFields(formID, fieldGUID, position)
VALUES
(1, '{52E9A16E-B489-4577-955F-05749AB0481B}', 0),
(1, '{52E9A16E-
浏览 1提问于2013-07-16得票数 0
回答已采纳
1回答
我有一个CSV文件，记录超过100 k，我需要将某些字段插入到一个表中，其余的字段插入另一个表中。
我知道我可以一个接一个地编写两个查询来获得这个结果，我尝试过了，它也运行得很好。但我想知道是否有可能做到以下几点：
从csv文件中读取一行。
取某些记录，插入表A。将剩余记录插入表B。
读下一行。重复2次。
这有可能吗？我知道MySQL中的并发性对系统来说确实是累人的，但我想知道我的所有选择。
浏览 3提问于2013-07-19得票数 0
1回答
使用默认值的多行条件插入
、、、、
下面是我使用的一个PostgreSQL查询的简化版本，用于将多行插入到表中： INSERT INTO my_table (a, b, datasource)
VALUES
('foo', 'bar', 'my source'),
('foo', DEFAULT, 'my source'),
(DEFAULT, 'bar', 'my source'); 请注意，DEFAULT值可能出现在列a或b中。 这可以很好地工作，但是我只想插入满足某些条件的行，另外，如果要插入的所有
浏览 11提问于2019-01-17得票数 1
回答已采纳
1回答
主键约束
、
我已经编写了一个查询来将两个表的数据合并为一个。当我尝试在主键值不同的情况下插入值时，这个查询可以很好地工作。但是，如果我尝试在第二个表中插入相同的值(主键值)，则会给出一个错误消息：
违反主键约束'PK_Person‘。无法在对象'dbo.Person‘中插入重复的键。
这是我写的查询：
插入到DB1.dbo.Person select * from db2.dbo.Person
如果存在重复的主键，如何替换主键值或跳过该行。
浏览 2提问于2015-09-03得票数 1
我试图将临时表插入到常规表中，但是由于临时表中有数据共享我要插入的表的主键的相同值，所以它会失败，违反主键约束。这是意料之中的，所以我只是通过插入要插入的表中没有主键的行来解决这个问题。
我尝试了这两种方法，而不是IN，我检查了展示这两种方法的示例，确认了这两种方法在SQL server 2014中的正常工作，但是我仍然得到以下错误：
违反主键约束'PK_dbo.InsuranceObjects‘。无法在对象'dbo.InsuranceObjects‘中插入重复键。重复的键值为(3835fd7c-53b7-4127-b013-59323ea35375)。
下面是我尝试过
浏览 0提问于2018-07-25得票数 0
回答已采纳
5回答
我需要删除所有重复的行：
t1
--------------------
col1 col2 col3
1 a b
2 a c
3 a b
在本例中，1和3是重复的。我需要将两者都插入到另一个表中，然后从当前表中删除这两个表。
t1
--------------------
col1 col2 col3
1 a c
t2
--------------------
col1 col2 col3
1 a b
2 a b
浏览 2提问于2012-05-24得票数 1
2回答
我需要编写一个在表上执行一些插入的存储过程，并根据插入的执行情况为每一行编译一个“状态”列表。每一行都将被插入到一个循环中，循环在游标上迭代，该游标为INSERT语句提供一些值。我需要返回的是如下所示的结果集：
FIELDS_FROM_ROW_BEING_INSERTED.., STATUS VARCHAR2
状态由插入的方式决定。例如，如果INSERT导致DUP_VAL_ON_INDEX异常，表明存在重复的行，我会将状态设置为"Dupe“。如果一切顺利，我会将其设置为“成功”，然后继续下一行。
最后，我得到了一个包含N行的结果集，其中N是执行的insert语句的数量，每一行都包含正在
浏览 1提问于2011-01-04得票数 0
回答已采纳
如果表中不存在更新行，则必须将许多行更新到表中，我需要插入该行。我不能使用唯一的密钥，所以在重复密钥更新时不能使用。
我必须实现这样的目标
DECLARE count DOUBLE;
SELECT count(uid)
INTO count
FROM Table
WHERE column1 ='xxxxx'
AND column2='xxxxx';
IF (count=0)
THEN
--peform insert
ELSE
--perform update
END IF
这是一个高性能的application.Any想
浏览 3提问于2013-01-11得票数 4
1回答
场景
我在一个文件(平面文件)中有employee对象，每一行代表一个employee记录
我在数据库表employee中有employee对象
我想将文件中的记录同步到表employee
插入那些不在表格中的内容
更新已存在的字段，但某些字段已更新
删除那些不在文件中，但存在于表中的记录
我能想到的一个简单的解决方案(不确定，如果这是正确的)：
删除数据库表中的所有记录，并将文件中的所有记录插入到表中
但是我想要更新那些已经存在的字段，但是有一个或多个字段已更改
注意: employee_id是唯一/主键，用于标识一条记录，文件或表中没有重复的记录
浏览 0提问于2013-07-18得票数 0
4回答
从重复行中选择一行
、、、
我有一个非常好的存储过程，它在数据库中的不同表中运行大约15个select语句--我将select的所有结果插入到一个临时表中。但是，该表有一些完全重复的行。临时表如下所示：
DocID | VisitDate | DocName
8245376 | 8/26/2009 1:07:01 PM | Doc1
8245376 | 8/26/2009 1:07:01 PM | Doc1
8245376 | 8/26/2009 1:07:01 PM | Doc2
8245376 | 8/26/2009 1:07:01 PM | Doc2
646681
浏览 1提问于2009-09-08得票数 5
回答已采纳
1回答
合并违反主键约束
、、、、
我有一个Server 2008多对多关系表(Assets)，其中有两列：
AssetId (PK, FK, uniqueidentifier, not null)
AssetCategoryId (PK, FK, int, not null)
在我的项目中，我需要从这个表中取出行，并定期将它们插入复制的数据库中。因此，我有两个完全相同的数据库(包括约束)。
为了从一个数据库“复制”到另一个数据库，我使用了一个合并语句和一个临时表。我将多达50条记录插入临时表中，然后将临时表与要复制的Assets表合并如下：
CREATE TABLE #Assets (AssetId UniqueIdentif
浏览 4提问于2012-05-23得票数 11
回答已采纳
我一直在尝试创建一个函数来加载一些文件，将它们插入到基于现有表的临时表中，然后验证加载的文件中没有重复的行，然后将它们插入到数据库中正确的表中，尝试使用以下内容：
let statement = " select * from ", vtable clipped, " where 1=0 into temp t_",vtable clipped
prepare pstatement from statement
execute pstatement
无济于事，因为临时表似乎是在与我工作的会话不同的会话上创建的。
有什么建议吗？
事先谢谢你们所有人
浏览 31提问于2018-07-28得票数 2
我正在使用SqlBulkCopy插入大量数据。数据源可能有一些重复的行。在目标表中，我有一个唯一性索引。
当出现第一个重复行时，SqlBulkCopy抛出异常并回滚内部事务。我希望它忽略异常并继续插入。(仅当异常针对重复行时)。
有一些关于这个问题的问题，但他们都在寻找报告的重复行，我只是不关心他们。
浏览 2提问于2010-11-08得票数 1
回答已采纳
2回答
有包含24500行数据的MySQL表，还有需要插入到MySQL中的包含26000串数据的文本文件，问题是这26000个字符串重复了MySQL表中的数据，所以我们需要对它们进行比较，只插入新的/唯一的。
cadastreArray -来自文本文件的数组
districtArray - mysql数组
当我试着去做
foreach ($cadastreArray as $cadastreValue) {
$districtExist = false;
foreach ($districtArray as $districtData) {
if ($cadastreV
浏览 1提问于2014-03-20得票数 0
1回答
我有一个标记输出(当前输出到一个临时表)，需要合并到另一个表中。每组标记都应作为最后一个表中每个不同ID的新行插入。
示例：
临时表：
标记
ABC
ABB
访问
etc (这个临时表中大约有50,000行。
ID表
国际商业银行(ID)-商品-商品价格
1成品率成本价成本价
(1).
1.
1._
1.对所有50k标记而言，更接近、更近等
2成品率成本价
(2)再转轨
2._
2/2-再转轨
2.(对所有50k标记而言)
重复表中的所有ID。从150到5000不等。
浏览 1提问于2014-11-20得票数 0
回答已采纳
1回答
我正在设计一个SSIS包，它将从“滚动”表加载一个“可操作”表。滚动值可以具有重复值，因为我们希望跟踪所有条目，但是操作表必须每个项目/工厂组合只有一行(String)。我想做的是用最新的记录替换任何传入的重复值，然后加载任何剩余的完全新的行--所以如果传入的加载包含目标中已经存在的“字符串”，那么删除旧记录并插入较新的记录。作为参考，源表和目标表有相同的列，但滚动表有一个“record#”以给它一个主键。这些领域是：
串(物品/工厂组合)记录日期Qty工厂
浏览 0提问于2019-03-16得票数 3
回答已采纳
4回答
我有song表，它有songCategory和songName列。在数据库级别上，songCategory和songName的组合被设置为唯一。因此，基本上，即使php尝试插入重复条目，数据库也不会允许。
问题是，项目具有用户可以一次插入一串歌曲的功能。正如您所知，对大数据的重复记录检查需要很长时间:对于每首歌，我必须询问是否有categoryID=x和songName=y的歌曲。因此，我需要你的建议，以解决这个问题，而不额外的重复检查。
我对此几乎没有什么想法，但我不太确定它们是否会奏效：
无论如何，我们都可以插入记录，如果有数据库错误，我们只需使用continue foreach循环即
浏览 4提问于2014-08-31得票数 1
回答已采纳
正如问题所述，我有一个使用c#读取的文本文件(700 mb)，我正在解析250万行，将每一行转换为类，序列化类，然后插入到server 2012数据库中。
我要插入的表有两列，如下所示：
{Auto_Increment_id: Serialized Byte Array}
我目前的策略是解析大约10000行，将它们插入数据库，然后重复。这大约需要3个小时，所以我相信有一个更有效的方法。
我的一个想法是将插入写到文本文件中，然后批量复制到数据库中。还有其他想法吗？
最后，我想把这个过程缩短到至少10-20分钟。这个是可能的吗？
浏览 0提问于2014-03-09得票数 1
回答已采纳
我正在使用大量的JSON数据，并通过SQLBulkCopy类将其存储在Server数据库中。
SqlBulkCopy bulkInsert = new SqlBulkCopy(conn);
bulkInsert.DestinationTableName = "dbo.Orders";
conn.Open();
bulkInsert.WriteToServer(rows.ToArray());
行是DataRow类型的列表。
我正在使用的数据是orders，所以大部分数据被插入到orders表中，但是其他一些表也需要插入，但是这些插入必须具有插入到orders表中的行的引用。
这
浏览 0提问于2016-11-22得票数 1
2回答
我们有一个数据仓库系统，需要将s3上以csv格式显示的数据加载到红移表中。唯一的限制是只有唯一的记录被插入红移。
为了实现这一点，我们将以以下方式使用暂存表。
创建一个临时表。
将S3文件复制到TEMOPRARY表中。
开始交易
插入到{主红移表} select从列上的{连接在暂存表和主红移表之间，该表应该是唯一的，以便记录是唯一的}
结束交易
select子查询中使用的联接返回那些存在于暂存表中的记录，但不返回主红移表中的记录。
是上述机制，没有竞争条件.
例如，考虑-
主红移表没有行，s3文件包含两个记录。
因此，当由两个不同的进程/请求加载相同的s3文件时。每个请求的select查询将主
浏览 2提问于2016-05-09得票数 0
1回答
我有一个数据库表，如下：
id min max
---------------------
1 0 20
2 21 30
3 31 40
我在网格视图(asp.net)中显示此表，用户可以在其中插入新行、更新现有行和删除任何行。这些都是我存储在datatable中的操作。在更新、插入、删除记录后，当用户想要保存它时，他或她按下保存按钮，修改后的数据表被保存在数据库中(与我填充网格视图的表相同)。为了更新数据库，我使用了OracleBulkCopy类。现在的问题是，当我更新datatable到数据库时，它正在重复已经存在的行。例如，如
浏览 0提问于2012-02-14得票数 0
回答已采纳
2回答
INSERT dbo.FileColumns(FileID, RowID, ColumnID, Value)
SELECT FileID, RowID, ColumnID, Value FROM #TempFileColumns;
我在表dbo.FileColumns上设置了这个索引: RowID、ColumnID上的聚集、唯一、主键索引
我得到这个错误:违反主键约束'PK_FileColumns‘。无法在对象'dbo.FileColumns‘中插入重复的键。
如何在插入时排除这样的重复行？请帮帮忙，谢谢。
浏览 2提问于2014-11-05得票数 0
2回答
我有一个存储用户从属关系状态的表。用户可以是学生、教员、员工、承包商或任何组合。这意味着对于用户105433，他可能在该表中显示为4行。不幸的是，最近的一组新员工被插入到表中两次，因此用户可以在相同的从属关系中有重复的行。
示例行数：
Role_ID -- Employee_ID --员工类型
10000 -- 203398 --教师
10001 -- 203398 --教师
10002 -- 203398 --学生
10003 -- 203542 --员工
10004 -- 203542 --员工
10005 -- 204844 --员工
10006 -- 204844 --学生
我想删除重
浏览 1提问于2013-11-22得票数 0
2回答
我有一个包含3个字段的表
id_Complex | fileLine | date
字段id_Complex和id_complex对于文件是相同的，当处理另一个文件时，id是从我的程序生成的ID，fileLine只是文件中的一行，日期是该行的记录日期。现在，我的程序在数据库中为从文件中读取的每一行执行插入操作。
我想知道，是否有可能进行批量操作，批量操作只是在表中特定列中插入值，而我只是将id_complex发送给sql，因此，SQL将使用我为SQL发送的id_complex、文件行和日期行进行插入。
我怎么才能做这么大的东西呢？可以使用具有预定义的值的大容量插入来实现此操作
浏览 0提问于2013-12-11得票数 0
1回答
我有一个正在被SSIS包修改的表，这个ssis包正在并行运行20+包，所有的包都通过存储过程在同一个表中插入值，这个表应该有不同的记录。由于所有包都是并行运行的，因此很少有记录会获得重复值。
我的问题是，如果我在这个表上设置了锁，并且2个进程/包同时尝试插入到表中，这将获得第一个优先级，如果表1获得第一个优先级，那么我是否会收到表2的错误消息，或者它将等待表1释放锁。
在表上实现锁将会对性能产生影响(我最初的想法是，我已经准备好在这方面受到挑战)。
对于从多个进程中获取重复记录的问题，有人能提出解决方案吗？
谢谢
浏览 0提问于2019-07-04得票数 1
在将值插入到表中之前，我需要检查重复的值，我正在使用split函数批量插入数据，如下所示
Dim VarItm As Variant
Dim i As Integer
Dim strSql As String
VarItm = Split(Me.txtTest, ",")
For i = 0 To UBound(VarItm)
strSql = "insert into tblSplit(Nums,dteDate) values(""" & VarItm(i) & """,#" &
浏览 0提问于2018-04-14得票数 0
1回答
我有一个由以下字段组成的表(TABLE1)：
MEMBERNO_PK - FIELD2_PK - FIELD3_PK - FIELD4 - FIELD5 - LOGDATETIME
前三个字段是主键。
我试图从表中识别和导出三种类型的重复条目：
整行重复--包括LOGDATETIME字段
整行重复-不包括LOGDATETIME字段
主键重复
我不希望在我的三个导出中出现重复行，即导出(2)中不应该出现来自数字(1)的行，而导出(2)中的行不应该出现在导出(3)中。
第1阶段
因此，我决定识别所有完整的重复行(1)，并使用以下SQL将它们插入临时表(TABLE1_FRD)中：
浏览 4提问于2017-06-27得票数 0
3回答
嗨，我正在尝试插入从excel工作表的值到SQL数据库中的java。SQL数据库已经通过一些其他技术插入了一些行。现在我需要从excel表格中插入新的行，并且应该消除存在于数据库和excel表格中的重复值。为此，我编写了一个这样的查询。
首先，我使用insert query将excelsheet中的记录插入到SQL数据库中
Statement.executeUpdate(("INSERT INTO dbo.Company(CName,DateTimeCreated) values
('"+Cname”' ,'"+ts+"&
浏览 1提问于2012-02-15得票数 2
4回答
我有一个有6亿多行的.csv文件。我要把这个上传到数据库里。它将有3个列指定为主键。
我使用pandas读取1000行块的文件。
在每次块迭代中，我使用
INSERT INTO db_name.dbo.table_name("col1", "col2", "col3", "col4")
VALUES (?,?,?,?)
cursor.executemany(query, df.values.tolist())
在python中使用pyodbc语法来上传1000行块的数据。
不幸的是，显然存在一些重复的行。当遇到重复行时，上载
浏览 0提问于2018-07-29得票数 0
我在mysql中有一个很大的表，其中包含大约10lakhs的记录。我每天上传大约3000条记录，其中可能包含重复的记录。为了避免重复插入，我使用了"replace into...“语句插入到表中。但它在上传表格时不给出删除和插入记录的信息。我需要显示重复的记录以及替换的记录。我试着在同一个表上使用"innerjoin“和"groupby”来做上面的工作，但是上传的时间太长了。谁能告诉我如何在使用"Replace into..“时捕获插入和替换记录？MySQL中的语句。
浏览 7提问于2013-12-16得票数 0
我有一个接受TVP的存储过程，输入有6,000行。当前代码将TVP复制到临时表中，在临时表上迭代RBAR以在实际表上插入一行，从insert中获取Identity/PK值，使用PK (稍后在存储过程中使用)更新临时表，然后重复上述操作。
有没有一种很酷的和/或快速的方法来插入整个临时表，然后用pk值更新它？没有什么直截了当的想法浮现在脑海中，所有的想法都值得赞赏。
我想我可以在临时表中添加一个额外的列，并在它上面放一个序列号，这样所有的行都是唯一的，并遵循这个想法：，但我对其他基于集合的建议持开放态度……
谢谢。
浏览 1提问于2014-05-28得票数 0
我有一个旧的表，有多个列存储名称，名称可能在整个表中重复多次。我想选择每一列中的所有名称，丢弃重复的名称，并将它们插入到一个新表中。
现在，我一次只能执行一条select语句，而且每个select语句之间不能继续使用不同的函数，因此我最终只能使用重复的名称。我使用的是MySQL。
INSERT INTO new_table (name)
SELECT DISTINCT old_table.name
FROM old_table
WHERE blah blah blah
INSERT INTO new_table (name)
SELECT DISTINCT old_table.name2
F
浏览 14提问于2017-02-15得票数 0
回答已采纳
2回答
我正在开发一个访问Sybase ASE 15.0.2的应用程序，其中的当前代码访问远程数据库(CIS)以使用代理表定义(目标表是DOL - DRL表- PK行被定义为identity，并且总是在增长)来插入一行。当前代码执行select检查该行是否已经存在，以避免插入重复数据。
由于远程表在表上也有一个PK定义，因此我确实理解在提交行之前将再次进行PK验证。我计划删除select检查，因为PK验证再次有效地完成了它，但我担心当接收到具有许多重复项的文件时，当尝试提交数据时，表可能会遇到一些不必要的争用。
我不清楚Sybase ASE是否试图保持最后一行，并在检查重复之前写入数据。此外，如果表非
浏览 1提问于2013-06-03得票数 0
奇怪的问题，我知道。我不想删除所有行并重新开始，但我们有一个开发数据库表，其中一些行具有重复的ID，但值不同。
我想删除具有重复ID的所有记录，这样我就可以在新版本的表上强制数据完整性，并建立关系。目前，它是一个由代码(遗留)插入和生成的ID。
从另一个问题中，我得到了这个：
delete
t1
from
tTable t1, tTable t2
where
t1.locationName = t2.locationName and
t1.id > t2.id
但这不会起作用，因为ID是相同的！
如何删除除一条I相同的记录之外的所有记录？即删除其中具
浏览 0提问于2011-04-21得票数 2
回答已采纳
2回答
实际上，我希望在MySQL中的过程的生命周期中，将一些行存储在一个临时变量中。
我的过程将在过程开始时获取一列外键。一旦我完成了对它们的处理，我想要更新表，以指示它们已经被处理。当我的过程正在处理它的数据集时，可能会有插入到这个表中，所以我不想错误地将这些新行标记为已处理。我也不想锁定这个表，并阻止正在进行插入操作的线程。
临时表是最好的解决方案吗？
浏览 3提问于2008-11-18得票数 0
回答已采纳
2回答
我有一个相当复杂的场景，其中相同的包可以并行运行。在某些情况下，两次执行都可能以尝试将同一行插入到目标中而告终，这会导致违反主键错误。
目前有一个查找来检查目标表，以查看记录是否存在，因此插入操作是在其“无匹配”输出上完成的。它不能防止错误，因为查找是在包开始时加载的，因此两个包都获得了相同的数据，如果有行进来，它们都会认为它是一个“新”行，所以第一个成功，第二个失败。
有什么可以避免这种情况的方法吗？几乎忽略了oledb目标上的“重复行”？我不能使用MAX ERROR COUNT，因为重复的行在bath中，而其他行不在第一个包中，应该插入。
浏览 1提问于2013-01-16得票数 0
1回答
在尝试插入数据时，我们得到了一个TX行锁争用错误。
它发生在运行一个处理具有几乎10000条记录的xml的作业时，将数据插入到表中。
我们在表中的一个列上有一个唯一的键约束，在请求中我们得到了重复的值。这会导致锁，因此作业需要更多的时间。
我们用的是冬眠和春天。我们使用的DAO方法是hibernate模板的“保存”，带有Spring事务管理器的@Transactional注释
有什么建议吗？
浏览 8提问于2014-01-22得票数 0
我在用sqlite。在将ID插入永久表之前，我正在导入ID外部分配到临时表中的数据集。永久表使用外部id (RunId)，并且没有其他id列。
我将表从csv导入到一个新的表Book1中，其中C15是ID列。然后我运行插入：
INSERT INTO PrimusRuns (RunId, TransientName, RunDateStart, RunType, TestDateStart,
Gross, CPS, Shares, MaxExposure, PercentWin, Duration)
SELECT a.C15, a.C1, JULIANDA
浏览 1提问于2018-03-01得票数 5
回答已采纳
我正在尝试确定是否有一种实用的方法来防止使用Azure SQL DW将重复行插入到表中，而该表已经包含数十亿行(比方说200亿行)。
需要这样做的根本原因是，数据的来源是第三方，该第三方发送了本应是唯一的数据，但有时会发送没有标识密钥的副本。不幸的是，我不知道我们是否已经收到了他们发送的数据。
我尝试的是创建一个包含行散列列(根据其他几个列预先计算的)的表，并根据行散列分发数据。例如：
CREATE TABLE [SomeFact]
(
Row_key BIGINT NOT NULL IDENTITY,
EventDate DATETIME NOT NULL,
Emai
浏览 0提问于2018-03-22得票数 0
我有一个名为table1的表，它有重复的值。它看起来是这样的：
new
pen
book
pen
like
book
book
pen
但是我想从该表中删除重复的行，并将它们插入到另一个名为table2的表中。
table2应该如下所示：
new
pen
book
like
如何在SQL Server中执行此操作？
浏览 1提问于2013-02-28得票数 7
回答已采纳
1回答
我一直有这个问题，只是需要下面关于错误的更多信息
-1652-ORA-01652:无法在表空间"temp_tablespace name“中将临时段扩展128，我现在几乎每个月都需要增加临时表空间。
目前每天午夜，系统运行存储过程将从2-3个表中收集的数据插入到1个表中。在查询中，我使用"distinct“语句进行查询。我需要使用distinct，因为在此之前，即使表有主键，也会插入重复的值。
我的问题是：
1) "distinct“语法是否导致临时表空间已满？
2)如果是，那么我需要做什么而不是增加表空间？如果不是，那么是什么原因导致临时表空间总是满的？
浏览 1提问于2014-09-17得票数 1
我必须逐行删除重复的值，以便只留下唯一的行。
假设我的表中有以下值。
no code name
1 001 ronald
1 001 NULL
2 002 peter
2 002 peter
3 003 john
3 003 john
4 004 NULL
4 004 chris
我必须删除重复的记录，以便预期输出为：
no code name
1 001 ronald
2 00
浏览 2提问于2012-08-03得票数 1
我有一个表，其中的列采用默认值：
create table indexing_table
(
id SERIAL PRIMARY KEY,
created_at TIMESTAMP WITH TIME ZONE DEFAULT NOW(),
);
如何在此表中插入多个默认行？我是否需要重复该命令：
insert into indexing_table default values;
想插入多少次就插入多少次？
浏览 1提问于2015-01-29得票数 7
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
