MySQL批量插入唯一索引冲突的几种避免办法

 更新时间:2024年02月21日 10:47:18   作者:MinggeQingchun  
我们在进行大批量的数据插入时,遇到唯一索引冲突是经常的事,本文主要介绍了MySQL批量插入唯一索引冲突的几种避免办法,具有一定的参考价值,感兴趣的可以了解一下

我们在进行大批量的数据插入时,遇到唯一索引冲突是经常的事,报错如下:

java.util.concurrent.ExecutionException: org.springframework.dao.DuplicateKeyException: 
### Error updating database.  Cause: java.sql.SQLIntegrityConstraintViolationException: Duplicate entry '1122-zhangsan' for key 'idx_no_name'

在MySQL中有4种方法可以避免唯一索引冲突

(一)导入差异数据,忽略重复数据,IGNORE INTO的使用

(二)导入并覆盖重复数据,REPLACE INTO 的使用

(三)导入保留重复数据未指定字段,INSERT INTO ON DUPLICATE KEY UPDATE 的使用

表 test1

1、insert ignore into

INSERTIGNORE语句可以在插入数据时忽略唯一索引冲突的错误,而不会中断插入过程。

如果插入的数据存在唯一索引冲突,那么MySQL将忽略该行的插入操作,继续插入下—行数据。

INSERT IGNORE INTO table_name (column1, column2, ...)
VALUES (valuel, value2, ...),...

2、replace into

REPLACE语句可以用于插入新行或替换已存在的行。

如果存在primary or unique相同的记录,则先删除掉。再插入新记录

如果插入的数据存在唯一索引冲突,那么MySQL将删除已存在的行,并插入新行。

这种方法就是不管原来有没有相同的记录,都会先删除掉然后再插入。这意味着插入操作总是成功的,但可能导致数据丢失

REPLACE INTO table_name (columnl, column2, ...)
VALUES (valuel, value2, ...),...

3、on duplicate key update

当primary或者unique重复时,则执行update语句,如update后为无用语句,

如id=id,则同1功能相同,但错误不会被忽略掉。例如,为了实现name重复的数据插入不报错,可使用一下语句:

INTO table_name (columnl, column2, ...)
VALUES (valuel, value2, ...),...
ON duplicate KEY UPDATE id = id

这种方法有个前提条件,就是,需要插入的约束,需要是主键或者唯一约束。

4、insert … select … where not exist

根据select的条件判断是否插入,可以不光通过primary 和unique来判断,也可通过其它条件。例如:

INSERT INTO books (name) SELECT 'MySQL Manual' 
FROM dual 
WHERE NOT EXISTS (SELECT id FROM books WHERE id = 1)

这种方法貌似写这很繁琐

INSERT INTO order (orderId ) VALUES
SELECT '500002' FROM DUAL WHERE NOT EXISTS (
SELECT * FROM order WHERE orderId='500002'
)

到此这篇关于MySQL批量插入唯一索引冲突的几种避免办法的文章就介绍到这了,更多相关MySQL避免唯一索引冲突内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • 一文搞懂什么是MySQL前缀索引

    一文搞懂什么是MySQL前缀索引

    所谓前缀索引,说白了就是对文本的前几个字符建立索引,有点类似于 Oracle 中对字段使用 Left 函数来建立函数索引,只不过 MySQL 的这个前缀索引在查询时是内部自动完成匹配的。本文将通过示例详细聊聊前缀索引,需要的可以参考一下
    2022-09-09
  • MySQL数据库基本SQL语句教程之高级操作

    MySQL数据库基本SQL语句教程之高级操作

    对MySQL数据库的查询,除了基本的查询外,有时候需要对查询的结果集进行处理,下面这篇文章主要给大家介绍了关于MySQL数据库基本SQL语句教程之高级操作的相关资料,需要的朋友可以参考下
    2022-06-06
  • linux下改良版本mysqldump来备份MYSQL数据库

    linux下改良版本mysqldump来备份MYSQL数据库

    我的备份脚本都是在凌晨执行的,经常在慢查询日志里面看到这样的信息:select * from table1; 之前一直很纳闷,最后才了解到原来是MYSQLDUMP搞的鬼。
    2008-07-07
  • 浅析删除表的几种方法(delete、drop、truncate)

    浅析删除表的几种方法(delete、drop、truncate)

    这篇文章主要介绍了删除表的几种方法,需要的朋友可以参考下
    2014-05-05
  • MySQL多表数据记录查询详解

    MySQL多表数据记录查询详解

    这篇文章主要为大家详细介绍了MySQL多表数据记录查询操作,具有一定的实用性,感兴趣的小伙伴们可以参考一下
    2016-08-08
  • MySQL数据库设置远程访问权限方法小结

    MySQL数据库设置远程访问权限方法小结

    很多情况下我们需要远程连接mysql数据库,那么就可以参考下面的权限设置
    2013-10-10
  • MySQL数据库社招必考题:索引如何优化WHERE子句?

    MySQL数据库社招必考题:索引如何优化WHERE子句?

    本文系统分享WHERE子句优化方法,从定位低效SQL、分析原因到逐步改进,涵盖索引、写法调整及数据访问优化,通过实战案例说明常见错误及解决策略,强调优化需逻辑而非仅建索引,助力面试准备
    2025-09-09
  • Mysql全局ID生成方法

    Mysql全局ID生成方法

    本文给大家介绍mysql全局id生成方法,涉及到mysql全局id相关知识,感兴趣的朋友一起学习吧
    2015-12-12
  • MYSQL GROUP BY用法详解

    MYSQL GROUP BY用法详解

    这篇文章主要为大家详细介绍了MYSQL GROUP BY用法,具有一定的实用性和参考价值,感兴趣的小伙伴们可以参考一下
    2016-10-10
  • MySQL5.7 windows二进制安装教程

    MySQL5.7 windows二进制安装教程

    这篇文章主要为大家详细介绍了MySQL5.7 windows二进制安装教程,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2016-08-08

最新评论