1回答
Solr中的近重复检测
、、、、
Solr正被用于搜索用户生成的列表数据库。这些清单通过MySQL通过DataImportHandler导入到Solr中。
问题：--通常情况下，用户会向数据库报告相同的列表，有时还会对其列表帖子做一些小的更改，以避免被发现为重复的帖子。
如何使用Solr实现近乎重复的检测？我不介意在Solr索引中有接近重复的列表，只要搜索结果不包含这些近乎重复的列表。
我想大概有四个地方可以进行这种近乎重复的检测。
当用户提交清单时(这里使用PHP)
从MySQL到Solr的数据导入过程中
从MySQL导入数据之后
当搜索正在进行时
建议的方法是什么？谢谢!
浏览 2提问于2012-10-07得票数 1
回答已采纳
我有一个php脚本，可以将csv文件上传到mysql数据库中。
数据库有几个列。在这些列中有一个“电子邮件”字段。我编写了一些mysql，它将删除电子邮件列中包含重复值的行。下面是mysql：
$sql = "CREATE TABLE new_table as SELECT * FROM auto WHERE 1 GROUP BY email";
mysql_query($sql, $conn);
$query = mysql_query("SELECT COUNT(*) FROM new_table");
list($number) = mysql_fe
浏览 4提问于2012-06-18得票数 0
回答已采纳
我使用mysql命令行将数据从转储文件上传到db (MySQL5.1.42)，并获得重复的键错误。
这是我使用的格式：
/mnt/temp# mysql -u用户名-p -h url_of_db_master -D farm2 < db_dump_part_file_a
我能告诉mysql忽略重复的键吗？
谢谢！
浏览 0提问于2012-04-23得票数 0
回答已采纳
1回答
我需要一个从MySQL数据库表中删除重复行的PHP函数。例如，我有一张这样的桌子：
我尝试了以下几项，但没有成功：
$find = mysql_query("SELECT * FROM users");
while ($row = mysql_fetch_assoc($find))
{
$find_1 = mysql_query("SELECT * FROM users ");
if (mysql_num_rows($find_1) > 0) {
mysql_query("DELETE FROM users
浏览 3提问于2020-09-18得票数 0
3回答
我开发了一个电子邮件表单，将数据发送到sql数据库。然而，我注意到可能会有重复的电子邮件。有什么东西我可以添加到我的php或sql，以防止重复电子邮件？
<?php
if (isset($_POST['submit']) && strlen($_POST['email'])>0 && strlen($_POST['city'])>0)
{
$good_input = true;
$email=$_POST['email'];
$city=$_POST[&
浏览 0提问于2013-12-26得票数 1
回答已采纳
我有一个mysql复制的问题。我有两个表名为student和temp_student。除了temp_student之外，这两个表都有相同的字段，我添加了studentStatus和statusNote。问题是，当我对任何表使用mysql_num_rows来搜索重复数据时，比如学生姓名，它就会回显重复错误。但是，当我对两个表使用mysql_num_rows，并在两个表中插入相同的学生姓名时，数据仍然是重复的。下面是我的代码：
$name = $_POST['name'];
$checkName = mysql_query("select *from student whe
浏览 1提问于2014-03-13得票数 0
是否有可能找到最常用mysql数据库或在mysql服务器中运行的查询启用mysql常规日志记录？简而言之，我想知道哪个mysql数据库或查询在mysql服务器中重复最多？
谢谢
浏览 2提问于2014-12-21得票数 0
我需要从mysql数据库中获取最后的字符，以便我可以在android设备中填充listview元素。
我在数据库里有这个：
Aaaaa De
Bbbbb De
Ccccc Aut
Ddddd jjjj Slo
Fff fgz kiuj Gb
这样我就可以从mysql中获得
Aut
De
Gb
Slo
并且不要重复(在这个例子中，重复是去重复的)
它需要什么看起来查询？
浏览 1提问于2016-05-06得票数 0
1回答
我正在使用VS 2019开发WIN32应用程序。将数据插入到MYSQL数据库工作正常。但是在插入数据之前，我需要检查重复项。这是我在MYSQL的Product Table中检查名称重复的代码。 int nQueryState = 0;
MYSQL conn;
nQueryState = mysql_query(&conn, "SELECT * FROM product WHERE EXISTS (SELECT * FROM product WHERE product.Name = 'Paneer 200gm');");
if(nQueryState
浏览 17提问于2020-06-30得票数 0
我使用Python-MySQL (MySQLdb)库将值插入到数据库中。我希望避免将重复的条目插入到数据库中，因此我在MySQL中为该列添加了unique约束。我正在检查title列中的重复项。在我的Python脚本中，我使用了以下语句：
cursor.execute ("""INSERT INTO `database` (title, introduction) VALUES (%s, %s)""", (title, pure_introduction))
现在，当一个重复的条目被添加到数据库时，它将产生一个错误。我不希望出现错误消息；我只希望
浏览 3提问于2015-01-06得票数 6
回答已采纳
我有一个php表单来输入数据到mysql数据库中，我的问题是我如何处理重复的记录，例如，如果一个ID号已经存在，我如何检查是否存在，如果它确实抛出一个错误消息，对于expale说"ID已经在数据库中“，这是一个insert语句的例子，但是我希望它在输入之前检查数据库中的重复记录。
$values = $_POST;
foreach ($values as &$value) {
$value = mysql_real_escape_string($value);
}
$sql1="INSERT INTO loan (loan_id)
VALUES ('$
浏览 1提问于2012-04-15得票数 0
回答已采纳
首先，我对MySQL非常陌生，我正在努力学习它。
我有一个在页面加载上运行的脚本，它检索辛迪加类型数据并将其添加到MySQL数据库表中。
我所要做的就是将找到的新数据添加到数据库表中，而不添加从以前的页面加载中找到的重复数据。
我的数据库表如下：
// Creates a Database Table only if the Table does not already exist
mysql_query("CREATE TABLE IF NOT EXISTS $TableName(
id INT NOT NULL AUTO_INCREMENT,
浏览 7提问于2012-04-18得票数 5
回答已采纳
2回答
我想用它从mysql数据库的行中获取数据到文本文件中(一个条目在另一个条目下，每个文件50个条目)：
$ mysql --user=XXX --password=XXX --batch --skip-column-names \
-e "SELECT userid, displayname FROM Users" stackoverflowdb | \
split -l 50 -a 5 - "result."
但我也不想将重复的条目复制到这些文件中。这段代码会删除重复项吗?或者我需要添加一些东西来避免复制重复项吗？
浏览 1提问于2009-08-28得票数 1
回答已采纳
可能重复：
我想要将excel数据迁移到mysql数据库的过程。假设我有excel，abc.xls和MySql中的表格是abc，现在将逐步进行。我正在使用MYSQL。
请帮帮忙
浏览 3提问于2011-09-16得票数 1
我所做的是导航到安装MySQL的文件夹：
cd /usr/local/mysql/bin/
然后登录：
$ ./mysql -u root -p
并试图查看可用的数据库：
mysql-> show databases;
所以我得到了一个错误：
错误1046 (3D000)：未选择数据库
这很让人困惑..。那只发生过一次。我试着在30秒后执行相同的查询(当我还在登录时)，得到了正常的结果--可用数据库的列表。
第一次尝试查询失败的原因是什么？我试着重复这些步骤，我不能再重复这个问题了。
我在OSX塞拉。
浏览 6提问于2017-07-01得票数 0
我正在从perl插入到mysql数据库中。在第一次插入后，我得到了一个重复的错误。下面是我用于插入的代码。我正在从json响应中提取一个id。我在下面的代码中输出了我正在接收的内容
foreach my $listing(@{$json_text->{listings}})
{
my $id = $listing->{id};
print "\nid = $id \n";
# DO THE INSERT
my $query_insert = "INSERT INTO calendar (id) VALUES
浏览 6提问于2011-05-23得票数 0
回答已采纳
1回答
我有一个CSV文件，需要输入到我的数据库中。我的工作方式是批量插入。其中一列附加了唯一性约束，但它不是主列。如果存在重复条目，它会正确地跳过该行，并且不会将其输入到数据库中。(在命令行中，它表示重复: n，其中n是重复的总数)。
有没有什么方法可以检索重复的行号？例如，使用“显示警告”或“显示错误”，它会说明最近的MySQL错误和警告，是否可以只从MySQL中检索副本？
谢谢。
浏览 1提问于2013-05-02得票数 0
回答已采纳
我有一个包含一个索引的数据库表，其中keyname是PRIMARY，Type是BTREE，Unique是YES，Packed是NO，Column是ID，Cardinality是728，排序规则是A。
我有一个在页面加载上运行的脚本，它将条目添加到MySQL数据库表中，并从数据库表中删除重复项。
下面是删除重复项的脚本部分：
// Removes Duplicates from the MySQL Database Table
// Removes Duplicates from the MySQL Database Table based on 'Entry_Date'
浏览 0提问于2012-04-17得票数 4
1回答
我想在我的游戏服务器上使用MySQL向多个用户发送消息。在此过程中，多个重复字符串(MediumText，100~500个字符)数据将保存在同一列中。
预计100 k用户将收到邮件。
示例(在CSV中)：
ID,Item,Content,(SentDate,Expdate)
123148223598230,"{Crystal:100}","Sorry for the inconvenience...blahblah"
133124124515435,"{Crystal:100}","Sorry for the inconvenience.
浏览 1提问于2018-01-12得票数 0
回答已采纳
1回答
我有一个包含重复记录的单列csv文件。我有超过一万个records.So在使用LOAD DATA LOCAL INFILE
示例数据：
ID
1
2
3
2
2
1
2
mysql表被称为'huts‘。
我的第一个问题是，在mysql表‘huts’中插入数据时，是否可以计算出每行有多少重复行。
ID count
1 2
2 4
3 1
我的第二个问题是，如果上述情况不可能实现，那么我当前的工作代码将返回以下内容
ID
1
2
3
$insert_query = "LOAD DATA LOCAL INFILE 'test.csv
浏览 0提问于2014-06-14得票数 0
2回答
URL的MySQL数据类型
、、、、
可能重复：
我正在将我的访问权转移到mysql。我的url是access数据库中的数据类型Anchor，我想知道在mysql中存储它们的最佳数据类型是什么？
浏览 5提问于2011-10-26得票数 0
回答已采纳
我有一张mysql桌子。标题的结构如下：
字段中转站供应商
/T1382-1988数据计量数据计量数据
/T1382-1988数据计量数据计量数据
/T1282-1988数据规范数据
/T1282-1988数据规范数据
/T1282-1988数据规范数据
现在，我希望删除共享相同供应商值的重复行。因此，两个相同但具有不同供应商列值的行不应被视为重复。但是，等于和共享相同供应商价值的两个或多个行将被视为重复的，应该删除，只留下一个现有的副本。
如何使用mysql完成这一任务？
我做了类似的事情，但它删除了所有东西，而不仅仅是重复的值。我要至少还剩一份。
DELETE
从auto ((a
浏览 5提问于2012-07-31得票数 1
回答已采纳
我有以下内容，需要经常连接到我的MySql数据库，到目前为止，我已经在很多地方重复了后续代码：
var connection = mysql.createConnection({
host : 'localhost',
user : 'root',
password : 'indegene@123',
database : 'mytasks'
});
(整个index.js文件可以看到 )。
我的问题是，如何避免登录到数据库的重复代码，并将其保存在类似.env文件之类的东西中？
浏览 2提问于2019-03-08得票数 0
我需要上传csv到mysql。有规律。
所以我打算把csv上传到一个临时桌子上。而不是将数据从temporary_table移动到main_table。
现在，我需要帮助
如何移动数据。和(a)跳过重复，或(b)覆盖重复的，csv当前包含55566行，并且将与日俱增。那么，如何处理执行时间.最佳实践将csv导入mysql.
浏览 4提问于2012-05-27得票数 0
1回答
我为mysql数据库行设置了唯一的键集，这样就不会在表单提交中插入重复的条目。这可以很好地工作，但是如果有重复的条目，页面就不会加载。相反，用户会收到警告：Duplicate entry ''' for key ''
如何关闭错误并加载页面，即使有重复的键，同时仍然使用行上的唯一键？我尝试将错误报告设置为off，但这不起作用。
mysql_query("INSERT INTO user
(formemail,UserIP,Timestamp,LP) VALUES('$email','$userip',NOW(),&
浏览 1提问于2012-05-11得票数 1
回答已采纳
2回答
我有一个表为用户保存一个ID。该id的数据是从LDAP获得的，当用户第一次登录时，它会将他的ID插入到表中。但是，考虑到数据库中已经有数据的用户，我需要这样做。我得到错误的重复条目‘任何数据’的关键字‘主’。由于字段是插入数据的主键。但我得绕开这事。
$check = "select * from utilizadores where id = '$samaccountname[0]'";
$h = mysql_query($check);
if (!$h) {
die (mysql_error());
}
$data = mysql_fetch_arra
浏览 6提问于2014-04-28得票数 0
回答已采纳
我正在从MS Access过渡到MySQL。有了Access，我可以在表格之间复制和粘贴数据，任何重复的数据都会自动放在表格paste_errors中。如何在MySQL中完成此操作
浏览 2提问于2013-03-28得票数 1
可能重复: mysql的多文件系统
嗨,
如何将mysql数据库放在不同的分区(linux )中？
谢谢你，尤瑟夫
浏览 0提问于2011-03-20得票数 3
MULE ESB 3.7 Community，MYSQL DB连接器，操作: Insert，Type：：Version: 5.4.0
MySQL查询：
INSERT INTO TABLE1 (VAR1,VAR2) VALUES (2,1) ON DUPLICATE KEY UPDATE VAR1= 2, VAR2 = 1;
VAR1是表的唯一键。它不是主键.
Problem：上面的查询在MySQL Workbech中运行得很好。在Mule中，只要数据中没有VAR1的重复值，一切都能正常工作。但是，如果数据中存在VAR1的重复值，则会出现以下错误
错误2016-07-26 13:47:32,5
浏览 0提问于2016-07-26得票数 0
1回答
我在db中有一个歌曲名，在更新时，db中有更多的重复行。
例如:-
ID - 200 | TAGS - akon
ID - 201 | TAGS - akon
ID - 204 | TAGS - akon
我需要省略重复的数据或删除重复的行。
我正在检索数据使用
<?
$result = mysql_query("SELECT * FROM tags WHERE tag !='' ORDER by id DESC LIMIT 30");
while($row = mysql_fetch_array($result)) {
$title = s
浏览 1提问于2014-08-30得票数 0
回答已采纳
2回答
我对PHP和MySQL非常陌生，正在尝试从MySQL表中获取数据并打印出来。我给数据库打了个电话，它工作得很好。我能读懂信息。出去吧。但数据中有重复项。到目前为止，我有：
<?php
/// Make a MySQL Connection
mysql_connect("localhost", "loop", "XXX") or die(mysql_error());
mysql_select_db("loop") or die(mysql_error());
// Retrieve all the data from th
浏览 0提问于2015-10-18得票数 0
我构建的web应用程序出现了问题。它通过web服务接收和处理客户订单。
现在，它检查MySQL以确保此订单之前未处理过，但最近，我们收到了一些重复的订单。这两个命令之间的时间间隔为1毫秒。
我知道这是我的应用程序，我应该知道这一点，但这更像是一个一般性的问题：
有没有可能1毫秒的差异可能是MySQL向其数据库写入记录和我的应用程序检查该记录之间的差异？如果MySQL正在花时间写它的记录，我可以看到有两个重复的订单可以偷偷通过。
它似乎允许重复，因为它正在检查订单是否已经存在，并确定它不存在。
如果是这样的话--有没有更好的方法来防止重复数据进入我的系统？
浏览 0提问于2012-08-30得票数 2
回答已采纳
我是python的新手，我刚开始使用Storm和python作为基本的ORM。
我在一个文件中有很多数据，并且有一些重复的数据，为了识别它们，您可以看到一些行的in是重复的。
我想将它们插入到我的数据库中，我已经将id设置为主键，这样它就不能有重复项。我希望我的代码忽略在表中插入重复的数据。但是相反，它在_mysql_exceptions.IntegrityError: (1062, "Duplicate entry '75083587476530022' for key 'PRIMARY'")中失败了。
这是我的类的定义
from storm.
浏览 1提问于2012-10-24得票数 0
4回答
可能重复：
嗨，我有一些数据，我想输入到一个MySQL服务器。但是，数据是由我用java编写的程序生成的。是否可以使用java访问和写入MySQL服务器？
浏览 4提问于2013-01-29得票数 0
回答已采纳
我使用( MySQL -)SQLAlchemy管理一个mysql_engine = InnoDB数据库，并希望对所有表显式使用mysql_engine = InnoDB。有没有办法告诉数据库连接一次我想要这样做，这样我就不必对每个表重复它了吗？提前谢谢。
浏览 2提问于2014-09-10得票数 2
回答已采纳
我有问题插入数据从表单到MySQL 5.5数据库使用PHP5.3我能够插入我的数据，但我得到重复的插入。
下面是我的代码：
<?php
$host ="localhost";
$user ="root";
$password ="password";
$database ="database1";
$table ="users";
mysql_connect("$host","$user","$password")or die(mysql_error());
浏览 0提问于2012-11-27得票数 0
嗨，下面的代码，我要求什么日期都在我的数据库没有重复。然后我把它保存到一个数组中。在数组中，我还需要一个其他值。
我需要的值是在数据库中一天中有多少用户没有重复。例如，数组必须稍后看起来类似23.07.2013-10，24.07.2013-50(用户)。我搜索了几个小时，但找不到一个很好的mysql查询。
$query = "SELECT id, user, timestamp FROM stat WHERE timestamp BETWEEN '$datum1' AND '$datum2' GROUP BY timestamp";
$resul
浏览 2提问于2013-07-23得票数 0
回答已采纳
3回答
我在表中有5列，当id, address, lat, lng, timesetamp和一行在lat和lng列中都有相似的值时，行被认为是重复的。
MySQL查询
SELECT address, lat, lng FROM table GROUP BY lat, lng
问题：I设法使它只返回这个查询的唯一行。但是，结果似乎是最早插入到数据库中的重复行。如何使MySQL返回最新的复制行？类似于使用最新的timestamp返回重复行的内容
浏览 5提问于2011-11-16得票数 3
回答已采纳
3回答
可能重复：
我正在用php查询mysql数据库。
我需要知道哪些名称在表中重复超过375行(它有375行)。该表包含3列: id、名称、类别。
下面是我的php代码，但是它与php一起计算，我希望它是用mysql制作的。
$query = "SELECT * FROM user_likes";
//echo $query;
$result = mysql_query($query) or die(mysql_error());
// craete arrays
while($row = mysql_fetch_array($result)){
set_ti
浏览 0提问于2012-09-30得票数 0
5回答
我有一个带有重复记录的mySQL数据库，如附件中的图像。
我正在请求一个查询，以删除所有重复的记录，基于日期+时间，为数据库中的所有表(foreachtables)
谢谢
浏览 1提问于2012-02-03得票数 0
回答已采纳
我有一个包含标记信息的mysql数据库，其中一些标记对relation_id和tag_id是重复的。忽略其他字段，是否可以选择(并最终删除)这些字段对是冗余的行？
例如，我有这样一个表：
第二行是重复的，因为它具有与前一项相同的relation_id和tag_id值。第三行很好。第五行是重复的，第七行、第八行等等。
选择这些重复项的mySQL语法是什么？
浏览 2提问于2013-06-01得票数 0
回答已采纳
是否可以保持检查MySQL数据库，然后更新文本？我使用它来获取行数，然后对其进行回显：
$result = mysql_query("SELECT * FROM socialacc WHERE transid='$transID' AND access='$access'");
$i = 0;
while($row = mysql_fetch_array($result)) {
$i = $i + 1;
}
echo $i;
我希望重复这段代码，这样如果有另一行匹配，文本就会更新，而不会重新加载页面。我会使用Javascript来重复检查
浏览 4提问于2011-10-30得票数 0
回答已采纳
8回答
可能重复：
在没有MySQL ()错误的情况下连接到mysql_fetch_assoc数据库的正确方法是什么？
收到警告: mysql_fetch_assoc()：提供的参数不是mysql_connect('localhost‘、'name’、‘pass’)、mysql_select_db(‘dbname’)的有效MySQL结果资源；
在没有mysql_fetch_assoc的情况下获取mysql_select_db ()错误有什么建议吗？
守则如下：
var somethings= ;
浏览 8提问于2010-04-19得票数 0
回答已采纳
我想我在heroku上的数据库就要搞砸了。
我正在尝试通过heroku db:pull下载heroku上的远程数据库
我得到以下消息：
news_items: 100%Query Time: 00:00:01 /usr/lib/ruby/gems/1.8/gems/sequel-3.13.0/lib/sequel/adapters/mysql.rb:169:in ` |==========================================|‘：Mysql::Error:键'index_unique_user_plugins’的重复条目'3-Portfolio‘(S
浏览 2提问于2010-09-15得票数 0
回答已采纳
mysql 数据库中存在重复记录，删除保留其中一条， 百度看了，感觉sql好长好啰嗦，有啥敏捷的方法吗
mysql 数据库中存在重复记录，删除保留其中一条， 百度看了，感觉sql好长好啰嗦，有啥敏捷的方法吗
DELETE
FROM
vitae a
WHERE
(a.peopleId, a.seq) IN (
SELECT
peopleId,
seq
FROM
vitae
GROUP BY
peopleId,
seq
HAVING
count(*) > 1
)
AND rowid NOT IN (
SELECT
min(ro
浏览 200提问于2020-02-28
回答已采纳
因此，这是我的登录表单代码的一部分：
session_start();
if(isset($_SESSION['user']) != '') {
header ("Location: home.php");
}
require_once ('dbconnect.php');
if(isset($_POST['btn-signup']))
{
$uname = mysql_real_escape_string($_POST['
浏览 0提问于2015-07-16得票数 1
我在尝试什么！
我正在使用jquery、php和mysql制作事件日历。所创建的事件存储在mysql数据库中，然后取回并显示在日历中。事件包含开始日期和结束日期。如果用户想要创建一个事件，该事件要重复一周，那么他可以使用日历的递归属性，并将事件开始时的重复结束日期设置为一周。
我被堵住了！
假设一个用户需要一个重复的事件，这个事件不会像生日那样结束，或者每周重复一次。在这种情况下，我认为将每个事件插入数据库多年并不是一种很好的方法。让我们以另一种情况为例，用户创建为期两年的每日重复事件。在这里，数据库将变得人满为患。
我在找什么！
有人能给我提供一些关于如何使用、无结束日期、或非常长的结束日期
浏览 1提问于2013-05-15得票数 2
回答已采纳
如何从MySQL表中删除所有重复数据？
例如，使用以下数据：
SELECT * FROM names;
+----+--------+
| id | name |
+----+--------+
| 1 | google |
| 2 | yahoo |
| 3 | msn |
| 4 | google |
| 5 | google |
| 6 | yahoo |
+----+--------+
如果是SELECT查询，我会使用SELECT DISTINCT name FROM names;。
我该如何使用DELETE来仅删除重复项并保留每个重复项的一条记录？
浏览 1提问于2011-01-14得票数 461
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
