`

【mysql】mysql避免重复插入记录方法(ignore,Replace,ON DUPLICATE KEY UPDATE)

阅读更多
转自http://blog.sae.sina.com.cn/archives/3491
本文章来给大家提供三种在mysql中避免重复插入记录方法,主要是讲到了ignore,Replace,ON DUPLICATE KEY UPDATE三种方法,各位同学可尝试参考。
 
 

案一:使用ignore关键字

如果是用主键primary或者唯一索引unique区分了记录的唯一性,避免重复插入记录可以使用:

INSERT IGNORE INTO `table_name` (`email`, `phone`, `user_id`) 
VALUES ('test9@163.com', '99999', '9999');

 

这样当有重复记录就会忽略,执行后返回数字0

还有个应用就是复制表,避免重复记录:

INSERT IGNORE INTO `table_1` (`name`) SELECT `name` FROM `table_2`;

 

方案二:使用Replace

语法格式:

REPLACE INTO `table_name`(`col_name`, ...) VALUES (...);
REPLACE INTO `table_name` (`col_name`, ...) SELECT ...;
REPLACE INTO `table_name` SET `col_name`='value',

 

…算法说明:
REPLACE的运行与INSERT很相像,但是如果旧记录与新记录有相同的值,则在新记录被插入之前,旧记录被删除,即:

尝试把新行插入到表中
当因为对于主键或唯一关键字出现重复关键字错误而造成插入失败时:
从表中删除含有重复关键字值的冲突行
再次尝试把新行插入到表中
旧记录与新记录有相同的值的判断标准就是:
表有一个PRIMARY KEY或UNIQUE索引,否则,使用一个REPLACE语句没有意义。该语句会与INSERT相同,因为没有索引被用于确定是否新行复制了其它的行。

返回值:
REPLACE语句会返回一个数,来指示受影响的行的数目。该数是被删除和被插入的行数的和
受影响的行数可以容易地确定是否REPLACE只添加了一行,或者是否REPLACE也替换了其它行:检查该数是否为1(添加)或更大(替换)。

示例:
# eg:(phone字段为唯一索引)

REPLACE INTO `table_name` (`email`, `phone`, `user_id`) 
VALUES ('test569', '99999', '123');

另外,在 SQL Server 中可以这样处理:

if not exists (select phone from t where phone= '1')   
insert into t(phone, update_time) values('1', getdate()) 
else    
update t set update_time = getdate() where phone= '1'

 

更多信息请看:http://dev.mysql.com/doc/refman/5.1/zh/sql-syntax.html#replace

方案三:ON DUPLICATE KEY UPDATE

如‍上所写,你也可以在INSERT INTO…..后面加上 ON DUPLICATE KEY UPDATE方法来实现。如果您指定了ON DUPLICATE KEY UPDATE,并且插入行后会导致在一个UNIQUE索引或PRIMARY KEY中出现重复值,则执行旧行UPDATE。

例如,如果列a被定义为UNIQUE,并且包含值1,则以下两个语句具有相同的效果:

INSERT INTO `table` (`a`, `b`, `c`) VALUES (1, 2, 3) 
ON DUPLICATE KEY UPDATE `c`=`c`+1; 
UPDATE `table` SET `c`=`c`+1 WHERE `a`=1;

 

如果行作为新记录被插入,则受影响行的值为1;如果原有的记录被更新,则受影响行的值为2。

注释:如果列b也是唯一列,则INSERT与此UPDATE语句相当:

UPDATE `table` SET `c`=`c`+1 WHERE `a`=1 OR `b`=2 LIMIT 1;

 

如果a=1 OR b=2与多个行向匹配,则只有一个行被更新。通常,您应该尽量避免对带有多个唯一关键字的表使用ON DUPLICATE KEY子句。

您可以在UPDATE子句中使用VALUES(col_name)函数从INSERT…UPDATE语句的INSERT部分引用列值。换句话说,如果没有发生重复关键字冲突,则UPDATE子句中的VALUES(col_name)可以引用被插入的col_name的值。本函数特别适用于多行插入。VALUES()函数只在INSERT…UPDATE语句中有意义,其它时候会返回NULL。

INSERT INTO `table` (`a`, `b`, `c`) VALUES (1, 2, 3), (4, 5, 6) 
ON DUPLICATE KEY UPDATE `c`=VALUES(`a`)+VALUES(`b`);

本语句与以下两个语句作用相同:

INSERT INTO `table` (`a`, `b`, `c`) VALUES (1, 2, 3) ON DUPLICATE KEY UPDATE `c`=3; 
INSERT INTO `table` (`a`, `b`, `c`) VALUES (4, 5, 6) ON DUPLICATE KEY UPDATE c=9;

 

注释:当您使用ON DUPLICATE KEY UPDATE时,DELAYED选项被忽略。

示例:
这个例子是我在实际项目中用到的:是将一个表的数据导入到另外一个表中,数据的重复性就得考虑(如下),唯一索引为:email:

INSERT INTO `table_name1` (`title`, `first_name`, `last_name`, `email`, `phone`, 
`user_id`, `role_id`, `status`, `campaign_id`) 
    SELECT '', '', '', `table_name2`.`email`, `table_name2`.`phone`, NULL, NULL, 
'pending', 29 FROM `table_name2` 
    WHERE `table_name2`.`status` = 1 
ON DUPLICATE KEY UPDATE `table_name1`.`status`='pending'

再贴一个例子:

INSERT INTO `class` SELECT * FROM `class1` 
ON DUPLICATE KEY UPDATE `class`.`course`=`class1`.`course`

 

其它关键:DELAYED  做为快速插入,并不是很关心失效性,提高插入性能。
IGNORE  只关注主键对应记录是不存在,无则添加,有则忽略。

更多信息请看:  http://dev.mysql.com/doc/refman/5.1/zh/sql-syntax.html#insert

特别说明:在MYSQL中UNIQUE索引将会对null字段失效,也就是说(a字段上建立唯一索引):

INSERT INTO `test` (`a`) VALUES (NULL);

是可以重复插入的(联合唯一索引也一样)。

分享到:
评论

相关推荐

    防止mysql重复插入记录的方法

    防止mysql重复插入记录的方法有很多种,常用的是ignore,Replace,ON DUPLICATE KEY UPDATE,当然我们也可以在php中加以判断了。 方案一:使用ignore关键字 如果是用主键primary或者唯一索引unique区分了记录的唯一性,...

    MySql三种避免重复插入数据的方法

    当遇到主键或唯一键冲突的情况,有三种主要的插入方法可以帮助我们避免重复数据,分别是`INSERT IGNORE`、`REPLACE INTO`和`INSERT ON DUPLICATE KEY UPDATE`。下面我们将详细探讨这三种方法的用法及其区别。 1. **...

    MySql避免重复插入记录的几种方法

    在MySQL数据库中,确保数据的唯一性和避免重复插入记录是非常重要的任务。本文将详细介绍三种有效的方法:`IGNORE`、`REPLACE` 和 `ON DUPLICATE KEY UPDATE`。 1. 使用 `IGNORE` 关键字: 当你需要插入的数据可能...

    完美解决Thinkphp3.2中插入相同数据的问题

    本文将详细探讨如何在ThinkPHP 3.2版本中处理插入重复数据的问题,以及MySQL中的两种解决方案——`ON DUPLICATE KEY UPDATE` 和 `REPLACE INTO`。 首先,我们需要理解问题背景。在使用ThinkPHP 3.2进行数据插入时,...

    MySQL 处理插入过程中的主键唯一键重复值的解决方法

    本文将详细讲解三种方法:IGNORE、ON DUPLICATE KEY UPDATE和REPLACE,它们都能有效地避免因键重复而导致的插入失败。 1. **IGNORE关键字** 使用`IGNORE`关键字可以在尝试插入数据时忽略主键或唯一键重复的错误。...

    MySQL小技巧

    当遇到重复键时,可以使用`ON DUPLICATE KEY UPDATE`来更新已存在的记录。 #### 五、DELAYED 插入选项的深入理解 - **基本概念**: `DELAYED`选项主要用于批量插入数据时减少服务器负载。当使用`DELAYED`时,MySQL...

    MySQL 高级SQL操作(数据的增、删、改、查) (2).pdf

    - 记录用户登录时间,如果存在则更新,不存在则新增,可以利用`ON DUPLICATE KEY UPDATE`来实现。 ```sql CREATE TABLE t_4 (username VARCHAR(50) PRIMARY KEY, logintime INT UNSIGNED) CHARSET utf8; INSERT INTO...

    MySQL 高级SQL操作(数据的增、删、改、查).pdf

    而对于记录用户登录信息的表`t_4`,我们可以使用`on duplicate key update`来更新登录时间,当用户名已存在时,更新其对应的`logintime`字段。 在实际操作中,应根据业务需求和性能考虑选择合适的冲突处理方式。...

    Mysql中replace与replace into的用法讲解

    而 `REPLACE` 的效率相比 `INSERT IGNORE` 或 `INSERT ON DUPLICATE KEY UPDATE` 在某些情况下可能会更高,因为它不需要检查每一行是否存在冲突,而是直接进行替换。 总结来说,`REPLACE` 和 `REPLACE INTO` 是...

    MySQL 高级SQL操作(数据的增、删、改、查) (2).docx

    - **冲突更新**:`insert into 表名 [(字段列表)] values(值列表) on duplicate key update 字段 = 新值[,字段=新值...]`,当冲突发生时,指定的字段会被更新为新的值。 - **冲突替换**:`replace into 表名 [...

    mysql不同数据库不同数据表导入数据

    总结一下,`INSERT INTO`适用于新数据插入,`REPLACE INTO`适用于完全替换已有数据,`INSERT IGNORE INTO`避免覆盖数据,而`ON DUPLICATE KEY UPDATE`则允许在冲突时更新已有记录。在跨服务器的数据迁移时,需要额外...

    MySQL 高级SQL操作(数据的增、删、改、查).docx

    insert into 表名 [(字段列表)] values(值列表) on duplicate key update 字段 = 新值[,字段=新值...]; ``` 3. **冲突替换**:删除原有的记录,然后插入新的记录。但这种方式效率较低,因为它需要先检查冲突。 `...

    MySQL PerformanceTips

    ON DUPLICATE KEY UPDATE或INSERT IGNORE**:避免在更新数据时先SELECT,从而减少查询次数。 23. **使用GROUPWISE MAX代替子查询**:在某些情况下,直接使用聚合函数可以避免子查询,提高性能。 以上是MySQL性能...

Global site tag (gtag.js) - Google Analytics