您现在的位置: 首页 > 网站导航收录 > 百科知识百科知识

Mysql数据库中有哪些方法可以避免数据重复写入？

数据,字段,索引Mysql数据库中有哪些方法可以避免数据重复写入？

发布时间：2020-12-06加入收藏来源：互联网点击：

Mysql数据库中有哪些方法可以避免数据重复写入？

回答于 2019-09-11 08:43:50

回答于 2019-09-11 08:43:50

数据重复需要根据不通的业务不通的方法来解决，下面是一些常规的解决方法：

1、根据业务，加唯一约束。例如订单表，你可以对流水号或者订单号增加unique。

2、根据业务，如果不能加唯一约束，通过加锁实现。例如mysql的get_lock和release_lock可以去显示。当然自己创建一个锁表也是可以的，将整个请求锁住。

3、如果mysql性能不好，就使用一些缓存系统去实现，例如redis或者Memcache。

4、异步队列

回答于 2019-09-11 08:43:50

MySQL数据库中避免重复数据插入

在数据库中已经存在重复数据 ，并且数据量很大 的时候，在修改sql语句在插入时 避免重复插入，可以有以下方法。

设置唯一索引

使用ignore或者REPLACE INTO 或者ON DUPLICATE KEY UPDATE

on duplicate key update

如果数据存在会触发更新操作 执行后面语句的update

INSERT INTO tb_table(a,b,c) VALUE('1','bbb','ccc') ON DUPLICATE KEY UPDATE b= 'bbb',c='ccc'

ON DUPLICATE KEY UPDATE 之后的语句不是条件判断 条件的判断会根据你的唯一索引来判断触发update之后会执行 UPDATE之后的语句进行更新如果update之后写的是条件判断的话 就会出现只能插入无法更新的操作

replace into

如果数据存在就删除再插入

REPLACE INTO `student`(`name`, `age`) VALUES('Jack', 18);

insert ignore into

如果插入时 数据存在则忽略此次插入数据

INSERT IGNORE INTO `student`(`name`, `age`) VALUES('Jack', 18);

没有设置唯一索引

但是当你的数据库中数据存在重复，重复字段并没有设置唯一索引或者主键的时候，

上面的方法是无法使用的，这种情况可以使用

insert if not exists

insert if not existsINSERT INTO TABLE (field1, field2, fieldn) SELECT 'field1','field2','fieldn'FROM 表 WHERENOT EXISTS (SELECT * FROM 表名 WHERE 字段= ?)

回答于 2019-09-11 08:43:50

数据库的唯一性是很多业务场景需要考虑的事情，我觉得可以有以下几种方案：

1.数据表建立唯一索引。唯一索引能在数据库层面确保数据不重发，重发insert的数据会返回报错。

2.数据insert前先查询是否存在。数据校验是必要的，不能什么数据都往数据库里操作，判断存在的数据执行update即可。

3.如果是可以直接覆盖的语句，又不想预先查询，可以使用replace关键字。这个关键字比较少用，方法原理：将相同的字段数据直接先删掉，再重新添加，成功之后显示操作条数的是删除的条数加上新添加的条数。

4.有时候后端语言层面会避免不了的并发操作，例如大量线程的情况下。可以以先写入redis，再写入mysql

回答于 2019-09-11 08:43:50

首先数据重复定义需要明确，是某个字段还是多个字段重复。

重复定义的不同，使用的方法不同。

譬如

id不可重复，使用索引即可。保存数据会失败，进行异常回滚。

字段较多的，索引过多性能受影响，可以通过代码逻辑判断，先判断在保存。

如果在分布式下保存，此时还需要引入分布式锁，保证每次仅一端操作！分布式下还会引入其他问题，数据一致性问题，这些都是需要考虑的。

具体还是取决业务需求、利益权衡！

回答于 2019-09-11 08:43:50

首先数据重复定义需要明确，是某个字段还是多个字段重复。

重复定义的不同，使用的方法不同。

譬如

id不可重复，使用索引即可。保存数据会失败，进行异常回滚。

字段较多的，索引过多性能受影响，可以通过代码逻辑判断，先判断在保存。

如果在分布式下保存，此时还需要引入分布式锁，保证每次仅一端操作！分布式下还会引入其他问题，数据一致性问题，这些都是需要考虑的。

具体还是取决业务需求、利益权衡！

回答于 2019-09-11 08:43:50

试着站在生活角度来回答一下这个数据库问题

1.人不能两次踏入一条河流，是因为时间，河流都随时发生了变化。

2.世界上没有两片完全相同的叶子，是因为造物主赋予了生命。

3.一个人不允许拥有两个身份证，是因为公安机关在管理。

对于数据库来说，是否有唯一性索引，是否有写入前判断机制，是否重复数据约定规则足够清晰，都是影响插入重复数据的关键。

 1/2    1 2 下一页 尾页