mysql防止重复插入记录方法总结

防止mysql重复插入记录的方法有很多种,常用的是ignore,Replace,ON DUPLICATE KEY UPDATE,当然我们也可以在php中加以判断了。

方案一:使用ignore关键字

如果是用主键primary或者唯一索引unique区分了记录的唯一性,避免重复插入记录可以使用,代码如下:

INSERT IGNORE INTO `table_name` (`email`, `phone`, `user_id`) VALUES ('test9@163.com', '99999', '9999');

这样当有重复记录就会忽略,执行后返回数字0

还有个应用就是复制表,避免重复记录,代码如下:

INSERT IGNORE INTO `table_1` (`name`) SELECT `name` FROM `table_2`;

方案二:使用Replace

语法格式:

  1. REPLACE INTO `table_name`(`col_name`, ...) VALUES (...);
  2. REPLACE INTO `table_name` (`col_name`, ...) SELECT ...;
  3. REPLACE INTO `table_name` SET `col_name`='value',
  4. ...

算法说明:REPLACE的运行与INSERT很相像,但是如果旧记录与新记录有相同的值,则在新记录被插入之前,旧记录被删除,即:尝试把新行插入到表中

当因为对于主键或唯一关键字出现重复关键字错误而造成插入失败时,从表中删除含有重复关键字值的冲突行,再次尝试把新行插入到表中,旧记录与新记录有相同的值的判断标准就是,表有一个PRIMARY KEY或UNIQUE索引,否则,使用一个REPLACE语句没有意义。该语句会与INSERT相同,因为没有索引被用于确定是否新行复制了其它的行。

返回值:REPLACE语句会返回一个数,来指示受影响的行的数目。该数是被删除和被插入的行数的和受影响的行数可以容易地确定是否REPLACE只添加了一行,或者是否REPLACE也替换了其它行:检查该数是否为1(添加)或更大(替换)。

示例:# eg:(phone字段为唯一索引),代码如下:

REPLACE INTO `table_name` (`email`, `phone`, `user_id`) VALUES ('test569', '99999', '123');

另外,在 SQL Server 中可以这样处理,代码如下:

  1. if not exists (select phone from t where phone= '1') insert into t(phone, update_time) values('1', getdate()) else update t set update_time = getdate() where phone= '1'

方案三:ON DUPLICATE KEY UPDATE

如‍上所写,你也可以在INSERT INTO…..后面加上 ON DUPLICATE KEY UPDATE方法来实现,如果您指定了ON DUPLICATE KEY UPDATE,并且插入行后会导致在一个UNIQUE索引或PRIMARY KEY中出现重复值,则执行旧行UPDATE.

例如,如果列a被定义为UNIQUE,并且包含值1,则以下两个语句具有相同的效果,代码如下:

INSERT INTO `table` (`a`, `b`, `c`) VALUES (1, 2, 3) ON DUPLICATE KEY UPDATE `c`=`c`+1;

UPDATE `table` SET `c`=`c`+1 WHERE `a`=1;

如果行作为新记录被插入,则受影响行的值为1;如果原有的记录被更新,则受影响行的值为2.

注释:如果列b也是唯一列,则INSERT与此UPDATE语句相当.

代码如下:

UPDATE `table` SET `c`=`c`+1 WHERE `a`=1 OR `b`=2 LIMIT 1;

如果a=1 OR b=2与多个行向匹配,则只有一个行被更新。通常,您应该尽量避免对带有多个唯一关键字的表使用ON DUPLICATE KEY子句。

您可以在UPDATE子句中使用VALUES(col_name)函数从INSERT…UPDATE语句的INSERT部分引用列值。换句话说,如果没有发生重复关键字冲突,则UPDATE子句中的VALUES(col_name)可以引用被插入的col_name的值。本函数特别适用于多行插入。VALUES()函数只在INSERT…UPDATE语句中有意义,其它时候会返回NULL,代码如下:

INSERT INTO `table` (`a`, `b`, `c`) VALUES (1, 2, 3), (4, 5, 6) ON DUPLICATE KEY UPDATE `c`=VALUES(`a`)+VALUES(`b`);

本语句与以下两个语句作用相同:

INSERT INTO `table` (`a`, `b`, `c`) VALUES (1, 2, 3) ON DUPLICATE KEY UPDATE `c`=3;

INSERT INTO `table` (`a`, `b`, `c`) VALUES (4, 5, 6) ON DUPLICATE KEY UPDATE c=9;

注释:当您使用ON DUPLICATE KEY UPDATE时,DELAYED选项被忽略.

示例:这个例子是我在实际项目中用到的,是将一个表的数据导入到另外一个表中,数据的重复性就得考虑(如下),唯一索引为:email,代码如下:

  1. INSERT INTO `table_name1` (`title`, `first_name`, `last_name`, `email`, `phone`, `user_id`, `role_id`, `status`, `campaign_id`)
  2. SELECT '', '', '', `table_name2`.`email`, `table_name2`.`phone`, NULL, NULL, 'pending', 29 FROM `table_name2`
  3. WHERE `table_name2`.`status` = 1
  4. ON DUPLICATE KEY UPDATE `table_name1`.`status`='pending'

再贴一个例子,代码如下:

INSERT INTO `class` SELECT * FROM `class1` ON DUPLICATE KEY UPDATE `class`.`course`=`class1`.`course`

其它关键:DELAYED做为快速插入,并不是很关心失效性,提高插入性能,IGNORE只关注主键对应记录是不存在,无则添加,有则忽略.

php防止重复插入记录实例,代码如下:

  1. <?php
  2. $link=mysql_connect(‘localhost’,’root’,’1234’); //得到MySQL数据库连接
  3. $username=$_GET["name"]; //得到从客户端表单传过来的数据
  4. $q="select * from usertable where user_name='$username'";
  5. mysql_query("SET NAMES gb2312"); //避免出现中文乱码
  6. $rs = mysql_query($q, $link); //查询数据库
  7. $num_rows = mysql_num_rows($rs); //得到查询结果的总行数
  8. if($num_rows==0)
  9. // 烈火? phpfensi.com 欢迎复制,拒绝恶意采集 liehuo.net
  10. {
  11. $exec="insert into student (user_name) values ($username)";
  12. mysql_query("SET NAMES gb2312");
  13. mysql_query($exec, $link); //若没有此用户则将数据插入到数据库(注册用户)
  14. echo "用户注册成功!";
  15. }
  16. else
  17. {
  18. echo "该用户名已存在,请重新选择用户名!";
  19. }
  20. ?>

附一些删除重复记录的方法

查询及删除重复记录的SQL语句

1、查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断,代码如下:

  1. select * from people
  2. where peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1)

2、删除表中多余的重复记录,重复记录是根据单个字段,peopleId,来判断,只留有rowid最小的记录,代码如下:

  1. delete from people
  2. where peopleId in (select peopleId from people group by peopleId having count(peopleId) > 1) --phpfensi.com
  3. and rowid not in (select min(rowid) from people group by peopleId having count(peopleId )>1)

3、查找表中多余的重复记录,多个字段,代码如下:

  1. select * from vitae a
  2. where (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)

4、删除表中多余的重复记录,多个字段,只留有rowid最小的记录,代码如下:

  1. delete from vitae a
  2. where (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)
  3. and rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>1)

5、查找表中多余的重复记录,多个字段,不包含rowid最小的记录,代码如下:

  1. select * from vitae a
  2. where (a.peopleId,a.seq) in (select peopleId,seq from vitae group by peopleId,seq having count(*) > 1)
  3. and rowid not in (select min(rowid) from vitae group by peopleId,seq having count(*)>1)