我有一个php脚本，可以将csv文件上传到mysql数据库中。
数据库有几个列。在这些列中有一个“电子邮件”字段。我编写了一些mysql，它将删除电子邮件列中包含重复值的行。下面是mysql：
$sql = "CREATE TABLE new_table as SELECT * FROM auto WHERE 1 GROUP BY email";
mysql_query($sql, $conn);
$query = mysql_query("SELECT COUNT(*) FROM new_table");
list($number) = mysql_fe
浏览 4提问于2012-06-18得票数 0
回答已采纳
我正在从perl插入到mysql数据库中。在第一次插入后，我得到了一个重复的错误。下面是我用于插入的代码。我正在从json响应中提取一个id。我在下面的代码中输出了我正在接收的内容
foreach my $listing(@{$json_text->{listings}})
{
my $id = $listing->{id};
print "\nid = $id \n";
# DO THE INSERT
my $query_insert = "INSERT INTO calendar (id) VALUES
浏览 6提问于2011-05-23得票数 0
回答已采纳
3回答
我在表中有5列，当id, address, lat, lng, timesetamp和一行在lat和lng列中都有相似的值时，行被认为是重复的。
MySQL查询
SELECT address, lat, lng FROM table GROUP BY lat, lng
问题：I设法使它只返回这个查询的唯一行。但是，结果似乎是最早插入到数据库中的重复行。如何使MySQL返回最新的复制行？类似于使用最新的timestamp返回重复行的内容
浏览 5提问于2011-11-16得票数 3
回答已采纳
1回答
我需要一个从MySQL数据库表中删除重复行的PHP函数。例如，我有一张这样的桌子：
我尝试了以下几项，但没有成功：
$find = mysql_query("SELECT * FROM users");
while ($row = mysql_fetch_assoc($find))
{
$find_1 = mysql_query("SELECT * FROM users ");
if (mysql_num_rows($find_1) > 0) {
mysql_query("DELETE FROM users
浏览 3提问于2020-09-18得票数 0
我有一个包含标记信息的mysql数据库，其中一些标记对relation_id和tag_id是重复的。忽略其他字段，是否可以选择(并最终删除)这些字段对是冗余的行？
例如，我有这样一个表：
第二行是重复的，因为它具有与前一项相同的relation_id和tag_id值。第三行很好。第五行是重复的，第七行、第八行等等。
选择这些重复项的mySQL语法是什么？
浏览 2提问于2013-06-01得票数 0
回答已采纳
1回答
我在db中有一个歌曲名，在更新时，db中有更多的重复行。
例如:-
ID - 200 | TAGS - akon
ID - 201 | TAGS - akon
ID - 204 | TAGS - akon
我需要省略重复的数据或删除重复的行。
我正在检索数据使用
<?
$result = mysql_query("SELECT * FROM tags WHERE tag !='' ORDER by id DESC LIMIT 30");
while($row = mysql_fetch_array($result)) {
$title = s
浏览 1提问于2014-08-30得票数 0
回答已采纳
2回答
我正在尝试将数据从cvs文件上传到mysql。我想要过滤列滚动的重复值。就像。
Table1
-----------
id name roll
1 Nirdos 4
2 krishn 2
3 shrest 2
如果数据是这样的，我想插入前2行，因为第三行有重复行和第二行。
Thnks超前
浏览 2提问于2016-02-26得票数 0
1回答
我有一个包含重复记录的单列csv文件。我有超过一万个records.So在使用LOAD DATA LOCAL INFILE
示例数据：
ID
1
2
3
2
2
1
2
mysql表被称为'huts‘。
我的第一个问题是，在mysql表‘huts’中插入数据时，是否可以计算出每行有多少重复行。
ID count
1 2
2 4
3 1
我的第二个问题是，如果上述情况不可能实现，那么我当前的工作代码将返回以下内容
ID
1
2
3
$insert_query = "LOAD DATA LOCAL INFILE 'test.csv
浏览 0提问于2014-06-14得票数 0
1回答
我每天有15k个对象需要写到数据库中。我每天晚上都使用cronjob来写入mysql服务器。每晚，这15k个对象中的99%都是相同的，并且在数据库中是唯一标识的。
我已经设置了一个DB规则，声明通过指定唯一键将不会有重复的行。
我不想在实际插入之前检查现有行。
因此，我选择每晚插入所有15k对象，并允许mysql防止重复行…(当然它会抛出错误)。
我这样做是因为如果我检查一个预先存在的行-它会显著降低速度。
我的问题是:一次插入所有15k并允许mysql防止重复有什么问题吗？(不需要手动检查预先存在的行)是否有一个阈值，如果mysql出错1000次，它将锁定自己并拒绝所有后续查询？
请帮帮我！
浏览 3提问于2012-03-02得票数 0
回答已采纳
1回答
我为mysql数据库行设置了唯一的键集，这样就不会在表单提交中插入重复的条目。这可以很好地工作，但是如果有重复的条目，页面就不会加载。相反，用户会收到警告：Duplicate entry ''' for key ''
如何关闭错误并加载页面，即使有重复的键，同时仍然使用行上的唯一键？我尝试将错误报告设置为off，但这不起作用。
mysql_query("INSERT INTO user
(formemail,UserIP,Timestamp,LP) VALUES('$email','$userip',NOW(),&
浏览 1提问于2012-05-11得票数 1
回答已采纳
我们有一个数据库表，用于跟踪对长字符串的更改以进行审计。使用bzip之类的代码可以很好地压缩这些数据，因为行共享大量文本。使用MySQL压缩表时，数据不能很好地压缩，我认为这是因为MySQL使用的压缩只将重复的内容压缩到一行中。
有没有一种方法可以透明地压缩MySQL中的行信息，其中复制主要发生在行之间，而不是在一行中？
浏览 2提问于2014-02-13得票数 1
我有一张mysql桌子。标题的结构如下：
字段中转站供应商
/T1382-1988数据计量数据计量数据
/T1382-1988数据计量数据计量数据
/T1282-1988数据规范数据
/T1282-1988数据规范数据
/T1282-1988数据规范数据
现在，我希望删除共享相同供应商值的重复行。因此，两个相同但具有不同供应商列值的行不应被视为重复。但是，等于和共享相同供应商价值的两个或多个行将被视为重复的，应该删除，只留下一个现有的副本。
如何使用mysql完成这一任务？
我做了类似的事情，但它删除了所有东西，而不仅仅是重复的值。我要至少还剩一份。
DELETE
从auto ((a
浏览 5提问于2012-07-31得票数 1
回答已采纳
3回答
可能重复：
我正在用php查询mysql数据库。
我需要知道哪些名称在表中重复超过375行(它有375行)。该表包含3列: id、名称、类别。
下面是我的php代码，但是它与php一起计算，我希望它是用mysql制作的。
$query = "SELECT * FROM user_likes";
//echo $query;
$result = mysql_query($query) or die(mysql_error());
// craete arrays
while($row = mysql_fetch_array($result)){
set_ti
浏览 0提问于2012-09-30得票数 0
从MySQL表中选择重复行项
SELECT * FROM `table` GROUP BY `col1`,`col2` Having COUNT(`col1`)>1 and COUNT(`col2`)>1
实际结果
上面的查询返回第一个重复条目。从上述数据中，第1行和第7行包含同一列(col1、col2)中的重复字段。
但我需要得到最后一份复本。突出显示重复行
预期结果
浏览 3提问于2019-11-28得票数 0
3回答
我将保持它的简单性：
1)我有一个包含2列的数据库- word和text
2)每个单词有近似值。与之关联的600,000行文本。
3)我是一个转而使用php和mysql的.net用户--所以我有一点知识。
我的要求：
1)我将通过表单传递单词
2)表单将连接到数据库，并应显示600,000行中的2000行，这应该是不重复的
我目前的进展如下：
<?php
$con = mysql_connect("localhost","text_minx","pwd");
if (!$con)
{
die('Could not conne
浏览 1提问于2011-11-30得票数 2
我知道这可能与主键和唯一键有关，但我不确定如何使其工作。基本上，我希望MySQL生成一个新行，即使其中的数据是最后一行的重复。现在，以前行中的任何重复数据都会导致不生成该行。非常感谢您的帮助。
浏览 1提问于2017-04-07得票数 1
在我看来，这段代码看起来很好，但是我一直收到以下错误：
“分析错误:语法错误，第21行/home/txclanco/public_html/hotmuze/addSong.php中的意外$end”
这是一个脚本，它接受表单的输入，检查副本，如果有重复，它将不会生成新行，而只是将1添加到‘评级’行，其中的圣歌是输入的歌曲。如果没有重复，脚本将将数据添加为新行。数据类型如下：
A_I/intsongname = id =varchar= varcharrating = int
脚本下面是mysql数据的空白：
<?
mysql_connect("localhost",
浏览 6提问于2011-07-14得票数 0
2回答
我想用它从mysql数据库的行中获取数据到文本文件中(一个条目在另一个条目下，每个文件50个条目)：
$ mysql --user=XXX --password=XXX --batch --skip-column-names \
-e "SELECT userid, displayname FROM Users" stackoverflowdb | \
split -l 50 -a 5 - "result."
但我也不想将重复的条目复制到这些文件中。这段代码会删除重复项吗?或者我需要添加一些东西来避免复制重复项吗？
浏览 1提问于2009-08-28得票数 1
回答已采纳
我正在使用grafana和MySQL绘制一些数据。我试图获得重复的行，然后在我的grafana仪表板中显示到一个表中，在我的SQL中看到获得重复行的方法如下所示：
SELECT email, COUNT(*) Total
FROM clientes
GROUP BY email
HAVING COUNT(*) > 1
但是grafana sintaxys不允许“有”子句，所以我的查询结果显示了当天的所有数据，而不是获得重复的行。在grafana中有类似的条款可以使用吗？
浏览 4提问于2019-05-10得票数 1
回答已采纳
我们有一个具有重复主键索引项的MySQL数据库，这是DoS攻击的结果。通过ID上的选择(它将只显示一行，而不是两行)无法找到重复项，但是如果您通过用户名或密码进行选择，它将显示这两行。是否可以删除主键，删除重复行，然后重新索引主键？
我们试图修理这张桌子后，发现这些复制件还存在。
浏览 0提问于2010-10-30得票数 1
我需要上传csv到mysql。有规律。
所以我打算把csv上传到一个临时桌子上。而不是将数据从temporary_table移动到main_table。
现在，我需要帮助
如何移动数据。和(a)跳过重复，或(b)覆盖重复的，csv当前包含55566行，并且将与日俱增。那么，如何处理执行时间.最佳实践将csv导入mysql.
浏览 4提问于2012-05-27得票数 0
我是python的新手，我刚开始使用Storm和python作为基本的ORM。
我在一个文件中有很多数据，并且有一些重复的数据，为了识别它们，您可以看到一些行的in是重复的。
我想将它们插入到我的数据库中，我已经将id设置为主键，这样它就不能有重复项。我希望我的代码忽略在表中插入重复的数据。但是相反，它在_mysql_exceptions.IntegrityError: (1062, "Duplicate entry '75083587476530022' for key 'PRIMARY'")中失败了。
这是我的类的定义
from storm.
浏览 1提问于2012-10-24得票数 0
我想在MYSQL中显示重复值的所有列。
我基于这篇文章在MYSQL中选择了重复的值：。
我的sql语句如下所示：
SELECT
`subject`, `topic`, `sub_topic`, `difficulty`,`question_number`,`question_version`, COUNT(*)
FROM
`qz_question`
GROUP BY
`topic`, `sub_topic`, `difficulty`,`question_number`,`question_version`
HAV
浏览 1提问于2015-06-17得票数 0
可能重复：
我使用的是MySQL后端。当我试图连接到数据库时，我会得到以下错误。
警告: mysql_fetch_assoc()：提供的参数不是第18行/var/www/htdocs/somefile.php中的有效MySQL结果资源
有什么不对的想法吗？
浏览 3提问于2011-11-21得票数 0
2回答
有没有办法让less程序在每个显示的页面上重复第一行(或前2行)？
还有其他寻呼机程序可以这样做吗？
这将是一个杀手-应用程序的数据库表浏览，认为mysql或psql或gqlplus.
请看此页底部的截图。我想重复标题行+水平的ascii栏。
浏览 0提问于2011-12-28得票数 18
回答已采纳
是否可以保持检查MySQL数据库，然后更新文本？我使用它来获取行数，然后对其进行回显：
$result = mysql_query("SELECT * FROM socialacc WHERE transid='$transID' AND access='$access'");
$i = 0;
while($row = mysql_fetch_array($result)) {
$i = $i + 1;
}
echo $i;
我希望重复这段代码，这样如果有另一行匹配，文本就会更新，而不会重新加载页面。我会使用Javascript来重复检查
浏览 4提问于2011-10-30得票数 0
回答已采纳
我使用select *从mysql数据库中提取数据，目的是在不使用WHERE进行重复的sql查询的情况下多次使用这些数据。
使用这些数据，我提取包含搜索元素的行，使用
while($row=mysql_fetch_array($query_result)){ <<<if match add to new array>>> }
由于有数千行，这花费的时间比我想要的要长。
我正在尝试使用：
$row=mysql_fetch_array($query_result);
$a = array_search($word_to_check, $row);
echo
浏览 0提问于2013-06-06得票数 2
可能重复：
我与我的数据库相连，这一行代码似乎出现了一个错误：
while($br = mysql_fetch_assoc($brand))
在我的问题上，我说：
$brand = mysql_query("Select * from genratb");
错误说
Warning: mysql_fetch_assoc() expects parameter 1 to be resource, boolean given in C:\xampp\htdocs\videoshop\index.php on line 166
第一个命令实际上是我的第166行。
浏览 4提问于2012-10-11得票数 1
我有一张桌子如下。我想运行一个查询来使用php从表中选择数据，如果date column被重复，那么我只想取该日期的最后一行。
id Date start end publish
1 04-Nov-2015 1000 1300 0
4 04-Nov-2015 2100 3500 0
5 05-Nov-2015 1500 3000 0
与下表一样，当我运行查询时，结果应该会出现：
4 04-Nov-2015 2100 3500 0
5 05-Nov-2015
浏览 9提问于2015-11-05得票数 3
回答已采纳
2回答
我有一个有很多重复数据的电子邮件列表，我想合并在某一列中有重复数据的行。
下面是我的表格：
autoid,title,lastname,firstname,middlename,prefix,
fulladdress,address1,address2,
city,state,zip,country,county,phone1,phone2,email,id, ts
我想合并基于电子邮件和phone1的重复行。如果这两行中的内容相同，那么我想合并这两行并填充任何空格，然后删除第二行。具有较低autoid的行中的数据将优先于具有较高id的行。
如果我们可以用一个mysql查询就可以做到这一点，但
浏览 0提问于2013-01-14得票数 1
1回答
通过计算表行的哈希代码来检查重复记录：
我通过用户界面将excel文件上传到mysql数据库中，在实际插入记录之前，我必须根据主表中已经存在的记录识别重复的记录(记录的数量可以是2500000)，而且我必须尽可能快地这样做。
我的解决方案是在表中再添加一个字段，比如Hashcode，在插入记录时，我将计算每一行的哈希码，在检查重复行时，我将只匹配哈希码field.If，然后记录存在于主表中，否则记录是唯一的。
如果我不知道mysql数据库的功能，有没有其他更快的方法来做到这一点？
谢谢!
浏览 1提问于2014-09-26得票数 2
回答已采纳
2回答
在MySQL数据库中，我有行。例如：
Varchar1 | Varchar2
XXXXXXXXXX YYYYYYYYYY
YYYYYYYYYY XXXXXXXXXX
XXXXXXXXXX CCCCCCCCCC
YYYYYYYYYY AAAAAAAAAA
CCCCCCCCCC AAAAAAAAAA
如何找到(并移除)第1行和第2行中的重复字句？
不应删除一行(1或2)。
浏览 3提问于2016-03-14得票数 0
回答已采纳
可能重复：
我当前的cron作业脚本从数据库中删除所有行--如果用户希望在运行cron作业时重置密码，那么在将行添加到数据库时，我如何才能与mysql检查，这样就只能删除超过1小时的行？
我的cron_reset.php
<?php
require_once('mysql_config.php');
$link = mysql_connect(DB_HOST, DB_USER, DB_PASSWORD);
if(!$link)
{
die('Failed to connect to server: ' . mysql_error());
浏览 2提问于2012-12-06得票数 0
我有一个带DataGrid的视图。此DataGrid绑定到我的ViewModel中的List。my ViewModel使用EF6和MySQL 5.6填充此列表。它从视图而不是表中检索数据。
奇怪的是:当我的应用程序显示数据时，有一行“似乎”在另一行上重复。但是，在Mysql Workbench中，这一行根本不会重复。看一下下面的内容：
上面是来自Workbench的数据网格，显示了它们的详细信息。但是..。
在我的应用程序中，同一行似乎是重复的。
具有讽刺意味的是-在我的应用程序中-如果我指定Format字段只显示‘即时支付’，同样的‘重复’行将出现在结果中。尽管在Form
浏览 0提问于2016-12-01得票数 1
1回答
我正在尝试从mysql数据库中删除重复记录。使用下面的命令，它将删除所有重复项并保留一行。在我的数据库中有300,000条记录，我预计大约有100,000行是重复的。
下面的命令需要删除重复项，但问题是，我在晚上给出了该命令，它仍然运行了9个小时。
DELETE n1 FROM tableA n1,tableA n2 WHERE n1.title= n2.title AND n1.id > n2.id
这是怎么回事？有谁能解释一下吗？
浏览 0提问于2012-10-06得票数 4
回答已采纳
我有一个大型表(500万行)，其中有一个名为“unique_id”的唯一标识符列
我正在通过Node.js (node-mysql绑定)运行INSERT查询，并且有可能尝试插入重复的查询。
这两种解决办法是：
1)将“unique_id”作为索引，并在插入之前检查整个数据库是否有重复的记录：
'SELECT unique_id WHERE example = "'+unique_id+'" LIMIT 1'
2)使“unique_id”成为MySQL中唯一的索引，并在不检查重复项的情况下执行INSERT 。显然，任何重复都会导致错误，不会插入到表
浏览 2提问于2017-01-09得票数 1
回答已采纳
我有mysql数据库，其中的数据是列：
+----+-------+--------+--+
| ID | refID | data | |
+----+-------+--------+--+
| 1 | 1023 | aaaaaa | |
| 2 | 1024 | bbbbbb | |
| 3 | 1025 | cccccc | |
| 4 | 1023 | ffffff | |
| 5 | 1025 | gggggg | |
| 6 | 1022 | rrrrrr | |
+----+-------+--------+--+
我希望用重复值的行显
浏览 7提问于2022-10-28得票数 0
回答已采纳
我一直在尝试创建一个函数来查询数据库，从表中选择，如果行计数不等于6，那么从表中选择一行，然后重复(或者可能重复)，直到行计数等于6。我在StackOverflow中搜索了这个函数，但没有得到任何接近的结果。如果你有类似的链接，请把它贴在这里，我会试一试。
下面是我的代码：
//List All active adverts
function showActiveAdverts()
{
$status = 1;
//Build final queries.
$query = mysql_query("SELECT * FROM table WHERE
浏览 1提问于2015-10-28得票数 0
2回答
忽略主键重复
、、
我有一个包含近5000个对象的数组，我正在将其输入到一个MySQL数据库中。
该数组具有索引“crn”，并且MySQL表中相应的列是主键。
有没有办法让mysql在检测到重复的主键时跳过一个条目，而不是停止执行脚本？
我可以在插入每一行之前检查表，但由于我期望在5000个左右的对象中只有1到2个重复的对象，这似乎是非常昂贵的。
浏览 3提问于2012-01-11得票数 0
回答已采纳
5回答
假设我有一个mySQL数据库:两列: ID和names，有100行。我想要做的是挑选出10个名字-没有重复-并以随机顺序显示它们。
使用这个代码，我可以只选择一个名字...
<?php
include('connection.php');
$rand = rand(1, 100);
$sql = "SELECT * FROM names WHERE ID=$rand";
$result = mysql_query($sql, $sandbox);
while ($row = mysql_fetch_array ($result))
{
$name1
浏览 1提问于2013-05-18得票数 1
我使用的是MySQL5和Ruby On Rails 2.3.1。我有一些验证，偶尔无法防止重复的项目被保存到我的数据库。是否可以在数据库级别根据某些参数限制要创建的重复条目？
我正在将电子邮件保存到数据库中，并且不想保存重复的主题行、正文和发件人地址。有没有人知道如何通过迁移对数据库施加这样的限制？
浏览 0提问于2009-12-24得票数 0
回答已采纳
1回答
我正在使用Papa Parse来读取通常有许多重复行的CSV文件。通过步骤回调，在将行添加到MySQL数据库之前，每行都会被POSTed到一个API，该API会检查该行是否重复。问题是，Papa Parse在将前一行添加到数据库之前触发下一行(和POST请求)。由于重复的行通常彼此接近，所以我最终在数据库中得到了重复的条目。这在Papa Parse中是可以解决的吗？
可能的解决方案:让JSON编译并将每一行传递给一个异步函数，该函数等待每个POST请求完成。
$.get('file.csv', function(data) {
Papa.parse(data, {
浏览 5提问于2015-12-10得票数 1
我正在尝试添加一个“管理”部分的我的网站。现在，我正在编写一个部分，将一个新行添加到我的MySQL数据库中。
第一个文件是我的admin.php：
<html>
...
<body>
<form action="add.php" method="post">
<input type="text" name="order" />
<input type="text" name="newstatus" />
<in
浏览 0提问于2015-04-04得票数 0
回答已采纳
我花了大约3个小时在网上查看，我仍然找不到这个问题的答案。
java 和这个说：
返回：(1) SQL数据操作语言(DML)语句的行计数；或(2) 0表示不返回任何内容的SQL语句
所以它的意思是：
插入一行，不重复-> 1
插入不重复的3行-> 3
插入包含所有重复项的3行，而不更新值-> 0
插入3行，其中2行不重复，1行重复，更新a值-> 3。
插入3行，其中2行为非重复项，1行为不更新值的-> 2
或者至少这是我从文档中了解到的。
然而，阅读和在StackOverflow上的其他问题再次让我感到困惑，因为它没有描述这种行
浏览 2提问于2015-04-17得票数 1
我需要创建一个150行的PHP订单，每一行都有多个字段需要捕获。在提交表单时，将此数据输入mysql数据库而不重复编写代码的最佳方法是什么？
我可以使用POST获得150行中每一行的表单值，然后使用以下命令写入mysql：
INSERT INTO example
(example_id, name, value, other_value)
VALUES
(100, 'Name 1', 'Value 1', 'Other 1'),
(101, 'Name 2', 'Value 2', 'Other
浏览 1提问于2012-03-30得票数 0
回答已采纳
我想将复杂的唯一键添加到现有的表中。Key包含4个字段(user_id、game_id、date、time)。但是表有不唯一的行。我知道我可以删除所有重复的日期，然后添加复杂的密钥。
可能存在另一种解决方案，而无需搜索所有重复数据。(如添加、唯一、忽略等)。
UPD我搜索过，如何删除重复的mysql行-我认为这是一个很好的解决方案。
浏览 4提问于2013-03-07得票数 72
回答已采纳
17回答
我正在清理一个没有主键的数据库表(我知道，我知道，他们在想什么？)我无法添加主键，因为在将成为键的列中存在重复项。重复的值来自在所有方面都相同的两行中的一行。我不能通过图形用户界面删除行(在本例中是MySQL工作台，但我正在寻找一种数据库不可知的方法)，因为它拒绝在没有主键(或至少一个UQ NN列)的表上执行任务，并且我不能添加主键，因为在将成为键的列中存在重复项。重复的值来自一个...
我如何删除双胞胎中的一个？
浏览 0提问于2013-05-08得票数 48
回答已采纳
2回答
我在Mysql Server5.5的服务器端使用tomcat。
我使用Spring框架实现数据库连接。
我希望能够使用simpleJdbcInsert向表中插入一行。如果由于重复而导致插入失败，我希望它替换重复的行。
有没有办法做到这一点，或者我应该只使用jdbcTemplate，并使用"ON simpleJdbcInsert“语句创建我的on查询？
谢谢
浏览 0提问于2012-03-06得票数 3
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
