Oracle查询表⾥的重复数据⽅法
⼀、背景
  ⼀张person表，有id和name的两个字段，id是唯⼀的不允许重复，id相同则认为是重复的记录。
⼆、解决
  select id from group by id having count(*) > 1
  按照id分组并计数，某个id号那⼀组的数量超过1条则认为重复。
如何查询重复的数据
select 字段1，字段2,count(*) from 表名 group by 字段1，字段2 having count(*) > 1
PS：将上⾯的>号改为=号就可以查询出没有重复的数据了。
Oracle删除重复数据的SQL（删除所有）：
删除重复数据的基本结构写法：
想要删除这些重复的数据，可以使⽤下⾯语句进⾏删除
delete from 表名 a where 字段1，字段2 in
(select 字段1，字段2,count(*) from 表名 group by 字段1，字段2 having count(*) > 1)
上⾯的SQL注意：语句⾮常简单，就是将查询到的数据删除掉。不过这种删除执⾏的效率⾮常低，对于⼤数据量来说，可能会将数据库吊死。
建议先将查询到的重复的数据插⼊到⼀个临时表中，然后对进⾏删除，这样，执⾏删除的时候就不⽤再进⾏⼀次查询了。如下：
CREATE TABLE 临时表 AS  (select 字段1，字段2,count(*) from 表名 group by 字段1，字段2 having count(*) > 1)
上⾯这句话就是建⽴了临时表，并将查询到的数据插⼊其中。
下⾯就可以进⾏这样的删除操作了：
delete from 表名 a where 字段1，字段2 in (select 字段1，字段2 from 临时表);
Oracle删除重复数据的SQL（留下⼀条记录）：
oracle中，有个隐藏了⾃动rowid，⾥⾯给每条记录⼀个唯⼀的rowid，我们如果想保留最新的⼀条记录，我们就可以利⽤这个字段，保留重复数据中rowid最⼤的⼀条记录就可以了。
使⽤ROWID查询重复数据：
wid,a.* from 表名 a
wid !=
(select wid) from 表名 b
where a.字段1 = b.字段1 and
a.字段2 =
b.字段2 )
括号中的SQL查询出rowid最⼤的记录，⽽外⾯就是查询出除了rowid最⼤之外的其他重复的数据了。
由此，我们要删除重复数据，只保留最新的⼀条数据，就可以这样写了：
删除重复数据（留下最⼤ROWID的⼀条）
delete from 表名 a wid !=
(select wid) from 表名 b
where a.字段1 = b.字段1 and
a.字段2 =
b.字段2 )
删除重复数据（留下最⼩ROWID的⼀条）
delete tab t wid > (
select wid) from tab t2 l2 = t2.col2 l8 = t2.col8
)
当然，上⾯语句的执⾏效率是很低的，可以考虑建⽴临时表，讲需要判断重复的字段、rowid插⼊临时表中，然后删除的时候在进⾏⽐较。
create table 临时表 as select a.字段1,a.字段2,MAX(a.ROWID) dataid from 正式表 a GROUP BY a.字段1,a.字段2;
delete from 表名 a
wid !=
(select b.dataid from 临时表 b
where a.字段1 = b.字段1 and
a.字段2 =
b.字段2 );
commit;
对于完全重复记录的删除
对于表中两⾏记录完全⼀样的情况，可以⽤下⾯语句获取到去掉重复数据后的记录：
select distinct * from 表名
可以将查询的记录放到临时表中，然后再将原来的表记录删除，最后将临时表的数据导回原来的表中。如下：
CREATE TABLE 临时表 AS (select distinct * from 表名);
truncate table 正式表;
insert into 正式表 (select * from 临时表);
drop table 临时表;
如果想删除⼀个表的重复数据，可以先建⼀个临时表，将去掉重复数据后的数据导⼊到临时表，然后在从临时表将数据导⼊正式表中，如下：
INSERT INTO t_table_bak
select distinct * from t_table;
MySQL查询及删除重复记录的⽅法
查询及删除重复记录的⽅法（例⼦演⽰）
1、查表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断
select * from table where tableId in (select tableId from table group by tableId having count(tableId) > 1)
2、删除表中多余的重复记录，重复记录是根据单个字段（tableId）来判断，只留有rowid最⼩的记录。
delete from table where tableId in (select tableId from table group by tableId  having count(tableId) > 1) and rowid not in (select min(rowid) from table group by tableId having count(tableId )>1)
3、查表中多余的重复记录（多个字段）
select * from vitae a where (a.tableId,a.seq) in (select tableId,seq from vitae group by tableId,seq having count(*) > 1)
4、删除表中多余的重复记录（多个字段），只留有rowid最⼩的记录
delete from vitae a where (a.tableId,a.seq) in (select tableId,seq from vitae group by tableId,seq having count(*) > 1)
and rowid not in (select min(rowid) from vitae group by tableId,seq having count(*)>1)
5、查表中多余的重复记录（多个字段），不包含rowid最⼩的记录
select * from vitae a where (a.tableId,a.seq) in (select tableId,seq from vitae group by tableId,seq having count(*) > 1) and rowid not in (select min(rowid) from vitae group by tableId,seq having count(*)>1) 6、查询出⼀个表中，某⼀列的值是相同的SQL：
⽐⽅说
在A表中存在⼀个字段“name”，⽽且不同记录之间的“name”值有可能会相同，
现在就是需要查询出在该表中的各记录之间，“name”值存在重复的项；
Select Name,Count(*) From A Group By Name Having Count(*) > 1
如果还查性别也相同⼤则如下:
Select Name,sex,Count(*) From A Group By Name,sex Having Count(*) > 1
oracle查询表中字段⾥数据是否有重复
查单个字段：
SELECT TEST_NAME,COUNT(*) FROM T_TEST GROUP BY TEST_NAME HAVING COUNT(*) > 1
Oracle查询重复数据并删除，只保留⼀条记录
1、查表中多余的重复记录，重复记录是根据单个字段（Id）来判断
select
* from 表 where Id in (select Id from 表 group byId having count(Id) >
1)
2、删除表中多余的重复记录，重复记录是根据单个字段（Id）来判断，只留有rowid最⼩的记录
DELETE
from 表 WHERE (id) IN ( SELECT id FROM 表 GROUP BY id HAVING COUNT(id) > 1) AND
ROWID NOT IN (SELECT MIN(ROWID) FROM 表 GROUP BY id HAVING COUNT(*) >
1);
3、查表中多余的重复记录（多个字段）
select
* from 表 a where (a.Id,a.seq) in(select Id,seq from 表 group by Id,seq having
count(*) > 1)
4、删除表中多余的重复记录（多个字段），只留有rowid最⼩的记录
delete
from 表 a where (a.Id,a.seq) in (select Id,seq from 表 group by Id,seq having
count(*) > 1) and rowid not in (select min(rowid) from 表 group by Id,seq
having count(*)>1)
5、查表中多余的重复记录（多个字段），不包含rowid最⼩的记录
select
* from 表 a where (a.Id,a.seq) in (select Id,seq from 表 group by Id,seq having
count(*) > 1) and rowid not in (select min(rowid) from 表 group by Id,seq
having count(*)>1)
⽐如现在有⼀⼈员表（表名：peosons）
若想将姓名、⾝份证号、住址这三个字段完全相同的记录查询出来
select p1.*
from persons p1,persons p2
where p1.id<>p2.id
and p1.cardid = p2.cardid and p1.pname = p2.pname and
p1.address = p2.address
可以实现上述效果。
⼏个删除重复记录的SQL语句
1.⽤rowid⽅法
2.⽤group by⽅法
3.⽤distinct⽅法
据据oracle带的rowid属性，进⾏判断，是否存在重复，语句如下：
查数据：
select * from table1 a where rowid !=（select max（rowid）
from table1 b where a.name1=b.name1 and a.name2=b.name2……）
删数据：
delete from table1 a where rowid !=（select max（rowid）
from table1 b where a.name1=b.name1 and a.name2=b.name2……）
查数据：
select count（num）， max（name） from student
--列出重复的记录数，并列出他的name属性
group by num
having count（num） >1 --按num分组后出表中num列重复，即出现次数⼤于⼀次
删数据：
delete from student
group by num
having count（num） >1
mysql删除重复的数据保留一条
这样的话就把所有重复的都删除了。
3.⽤distinct⽅法 -对于⼩的表⽐较有⽤
create table table_new as  select distinct *  from table1
minux
truncate table table1;
insert into table1 select * from table_new;
查询及删除重复记录的⽅法⼤全
1、查表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断
select * from people
where peopleId in （select peopleId from people group by
peopleId having count（peopleId） > 1）
2、删除表中多余的重复记录，重复记录是根据单个字段（peopleId）来判断，只留有rowid最⼩的记录delete from people
where peopleId in （select peopleId from people group by
peopleId
having count（peopleId） > 1）
and rowid not in （select min（rowid） from people group by
peopleId having count（peopleId ）>1）
3、查表中多余的重复记录（多个字段）
select * from vitae a
where （a.peopleId,a.seq） in （select peopleId,seq from vitae
group by peopleId,seq having count（*） > 1）
4、删除表中多余的重复记录（多个字段），只留有rowid最⼩的记录
delete from vitae a
where （a.peopleId,a.seq） in （select peopleId,seq from vitae
group by peopleId,seq having count（*） > 1）
and rowid not in （select min（rowid） from vitae group by
peopleId,seq having count（*）>1）
5、查表中多余的重复记录（多个字段），不包含rowid最⼩的记录
select * from vitae a
where （a.peopleId,a.seq） in （select peopleId,seq from vitae
group by peopleId,seq having count（*） > 1）
and rowid not in （select min（rowid） from vitae group by
peopleId,seq having count（*）>1）
（⼆）
⽐⽅说
在A表中存在⼀个字段“name”，
⽽且不同记录之间的“name”值有可能会相同，
现在就是需要查询出在该表中的各记录之间，“name”值存在重复的项；
Select Name,Count（*） From A Group By Name Having Count（*） >
1
如果还查性别也相同⼤则如下：
Select Name,***,Count（*） From A Group By Name,*** Having
Count（*） > 1
（三）
⽅法⼀
declare @max integer,@id integer
declare cur_rows cursor local for select 主字段，count（*） from 表名
group by 主字段 having count（*） >； 1
open cur_rows
fetch cur_rows into @id,@max
while @@fetch_status=0
begin
select @max = @max -1
delete from 表名 where 主字段 = @id
fetch cur_rows into @id,@max
end
close cur_rows
set rowcount 0
⽅法⼆
＂重复记录＂有两个意义上的重复记录，⼀是完全重复的记录，也即所有字段均重复的记录，⼆是部分关键字段重复的记录，⽐如Name字段重复，⽽其他字段不⼀定重复或都重复可以忽略。
1、对于第⼀种重复，⽐较容易解决，使⽤
select distinct * from tableName就可以得到⽆重复记录的结果集。
如果该表需要删除重复的记录（重复记录保留1条），可以按以下⽅法删除
select distinct * into #Tmp from tableName
drop table tableName
select * into tableName from #Tmp
drop table #Tmp
发⽣这种重复的原因是表设计不周产⽣的，增加唯⼀索引列即可解决。
2、这类重复问题通常要求保留重复记录中的第⼀条记录，操作⽅法如下
假设有重复的字段为Name,Address，要求得到这两个字段唯⼀的结果集
select identity（int,1,1） as autoID, * into #Tmp from
tableName
select min（autoID） as autoID into #Tmp2 from #Tmp group by
Name,autoID
select * from #Tmp where autoID in（select autoID from
#tmp2）
最后⼀个select即得到了Name，Address不重复的结果集（但多了⼀个autoID字段，实际写时可以写在select⼦句中省去此列）（四）查询重复
select * from tablename where id in （
select id from tablename
group by id
having count（id） > 1
）

版权声明：本站内容均来自互联网，仅供演示用，请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198，我们将在24小时内删除。