SqlServer删除重复数据的方法

Posted 2020-09-10 小泉的博客

方法一 

declare @max integer,@id integer 
declare cur_rows cursor local for select 主字段,count(*) from 表名 group by 主字段 having count(*) > 1 
open cur_rows 
fetch cur_rows into @id,@max 
while @@fetch_status=0 
begin 
select @max = @max -1 
set rowcount @max 
delete from 表名 where 主字段 = @id 
fetch cur_rows into @id,@max 
end 
close cur_rows 
set rowcount 0 

方法二 
有两个意义上的重复记录，一是完全重复的记录，也即所有字段均重复的记录，二是部分关键字段重复的记录，比如Name字段重复，而其他字段不一定重复或都重复可以忽略。 
1、对于第一种重复，比较容易解决，使用 

select distinct * from tableName 

就可以得到无重复记录的结果集。 
如果该表需要删除重复的记录（重复记录保留1条），可以按以下方法删除

select distinct * into #Tmp from tableName 
drop table tableName 
select * into tableName from #Tmp 
drop table #Tmp 

发生这种重复的原因是表设计不周产生的，增加唯一索引列即可解决。 
2、这类重复问题通常要求保留重复记录中的第一条记录，操作方法如下 
假设有重复的字段为Name，Address，要求得到这两个字段唯一的结果集 

select identity(int,1,1) as autoID, * into #Tmp from tableName 
select min(autoID) as autoID into #Tmp2 from #Tmp group by Name,autoID 
select * from #Tmp where autoID in(select autoID from #tmp2) 

最后一个select即得到了Name，Address不重复的结果集（但多了一个autoID字段，实际写时可以写在select子句中省去此列） 

前段时间写的如何删除sql数据库中重复记录是针对sql数据库的，最近发现有人需求access数据库删除重复记录的语句，发上来与大家分享。 

delete from 表名 where 重复字段名 in (select 重复字段名 from 表名 group by 重复字段名 having count(重复字段名) > 1) and id not in (select min(id) from 表名 group by 重复字段名 having count(重复字段名 )>1) 

表名和重复字段名你跟着修改成你的数据库名和字段名就可以了