MySQL批量插入遇上唯一索引避免方法(避免导入重复数据)

本文介绍在MySQL中批量导入数据时,如何避免重复数据的问题。通过三种方法:IGNORE INTO忽略重复,REPLACE INTO覆盖重复,以及INSERT INTO ON DUPLICATE KEY UPDATE保留部分字段,详细解释了每种方法的使用场景和效果。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

MySQL批量插入遇上唯一索引避免方法(避免导入重复数据)
未避免导入重复数据,建议建立唯一索引 
防止批量插入时,遇上唯一索引,可以使用以下3种方法避免方法

(一)导入差异数据,忽略重复数据,IGNORE INTO的使用
(二)导入并覆盖重复数据,REPLACE INTO 的使用
(三)导入保留重复数据未指定字段,INSERT INTO ON DUPLICATE KEY UPDATE 的使用
表 test1

id    user_id    user_name    user_type
1    101    101    1
2    102    102    2
3    103    103    3
表 test2

id    user_id    user_name    user_type
1    201    201    1
2    202    202    2
3    203    203    3
4    101    204    4
(一)使用第一种方式导入,IGNORE INTO的使用:
INSERT IGNORE INTO test1(user_id,user_name,user_type) 
SELECT user_id,user_name,user_type FROM test2;
表 test1 的结果如下

id    user_id    user_name    user_type
1    101    101    1
2    102    102    2
3    103    103    3
4    201    201    1
5    202    202    2
6    203    203    3
表2 中的id=4的记录,则被忽略,不导入。

(二)使用第二种方式导入,REPLACE INTO 的使用
REPLACE INTO test1(user_id,user_name,user_type) 
SELECT user_id,user_name,user_type FROM test2;
表 test1 的结果如下

id    user_id    user_name    user_type
2    102    102    2
3    103    103    3
4    201    201    1
5    202    202    2
6    203    203    3
7    101    204    4
从上图可以发现,user_id = 101 的数据发生了变化。如果导入中发现了重复的,先删除再插入。

如果导入时,没有指定列,则未指定的列的数据,将会被替换为(Null)

REPLACE INTO test1(user_id,user_name) 
SELECT user_id,user_name FROM test2;
表 test1 的结果如下

id    user_id    user_name    user_type
2    102    102    2
3    103    103    3
4    201    201    (Null)
5    202    202    (Null)
6    203    203    (Null)
7    101    204    (Null)
(三)使用第三种方式导入,INSERT INTO ON DUPLICATE KEY UPDATE 的使用
INSERT INTO test1(user_id,user_name,user_type) 
SELECT user_id,user_name,user_type FROM test2 
ON DUPLICATE KEY UPDATE 
test1.user_name = test2.user_name;
表 test1 的结果如下

id    user_id    user_name    user_type
1    101    204    1
2    102    102    2
3    103    103    3
4    201    201    1
5    202    202    2
6    203    203    3
如上图,只有user_id=101 的 user_name 发生了变化,但是保留 test1 表的 user_type 字段。如果更新多个字段,再后面追加即可。

INSERT INTO test1(user_id,user_name,user_type) 
SELECT user_id,user_name,user_type FROM test2 
ON DUPLICATE KEY UPDATE 
test1.user_name = test2.user_name,
test1.user_type = test2.user_type;
————————————————
版权声明:本文为CSDN博主「jinmaodao116」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/jinmaodao116/article/details/54134480

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值