网页功能: 加入收藏 设为首页 网站搜索  
在SQL中删除重复记录
发表日期:2005-08-26作者:55015182[转贴] 出处:CSDN  

学习sql有一段时间了,发现在我建了一个用来测试的表(没有建索引)中出现了许多的重复记录。后来总结了一些删除重复记录的方法,在Oracle中,可以通过唯一rowid实现删除重复记录;还可以建临时表来实现...这个只提到其中的几种简单实用的方法,希望可以和大家分享(以表employee为例)。
SQL> desc employee
 Name                                      Null?    Type
 ----------------------------------------- -------- ------------------
emp_id                                                NUMBER(10)
emp_name                                           VARCHAR2(20)
salary                                                  NUMBER(10,2)

 
 
可以通过下面的语句查询重复的记录:
SQL> select * from employee;

 
    EMP_ID EMP_NAME                                  SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         1 sunshine                                      10000
         2 semon                                         20000
         2 semon                                         20000
         3 xyz                                           30000
         2 semon                                         20000

 
SQL> select distinct * from employee;
    EMP_ID EMP_NAME                                     SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         2 semon                                         20000
         3 xyz                                             30000
SQL>  select * from employee group by emp_id,emp_name,salary having count (*)>1
    EMP_ID EMP_NAME                                     SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         2 semon                                          20000

SQL> select * from employee e1
where rowid in (select max(rowid) from employe e2
 where e1.emp_id=e2.emp_id and
  e1.emp_name=e2.emp_name and e1.salary=e2.salary);

 
    EMP_ID EMP_NAME                                     SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         3 xyz                                             30000
         2 semon                                         20000

 
 
2. 删除的几种方法:

 
(1)通过建立临时表来实现
SQL>create table temp_emp as (select distinct * from employee) 
SQL> truncate table employee; (清空employee表的数据)
SQL> insert into employee select * from temp_emp;  (再将临时表里的内容插回来)

 
( 2)通过唯一rowid实现删除重复记录.在Oracle中,每一条记录都有一个rowid,rowid在整个数据库中是唯一的,rowid确定了每条记录是在Oracle中的哪一个数据文件、块、行上。在重复的记录中,可能所有列的内容都相同,但rowid不会相同,所以只要确定出重复记录中那些具有最大或最小rowid的就可以了,其余全部删除。
SQL>delete from employee e2 where rowid not in (
        select max(e1.rowid) from employee e1 where
        e1.emp_id=e2.emp_id and e1.emp_name=e2.emp_name and e1.salary=e2.salary);--这里用min(rowid)也可以。

 
SQL>delete from employee e2 where rowid <(
        select max(e1.rowid) from employee e1 where
        e1.emp_id=e2.emp_id and e1.emp_name=e2.emp_name and
                  e1.salary=e2.salary);

 
(3)也是通过rowid,但效率更高。
SQL>delete from employee where rowid not in (
        select max(t1.rowid) from employee t1 group by
         t1.emp_id,t1.emp_name,t1.salary);--这里用min(rowid)也可以。
 

 
    EMP_ID EMP_NAME                                     SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         3 xyz                                             30000
         2 semon                                         20000

 
 

 
 

SQL> desc employee
 Name                                      Null?    Type
 ----------------------------------------- -------- ------------------
emp_id                                                NUMBER(10)
emp_name                                           VARCHAR2(20)
salary                                                  NUMBER(10,2)

 
 
可以通过下面的语句查询重复的记录:
SQL> select * from employee;

 
    EMP_ID EMP_NAME                                  SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         1 sunshine                                      10000
         2 semon                                         20000
         2 semon                                         20000
         3 xyz                                           30000
         2 semon                                         20000

 
SQL> select distinct * from employee;
    EMP_ID EMP_NAME                                     SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         2 semon                                         20000
         3 xyz                                             30000
SQL>  select * from employee group by emp_id,emp_name,salary having count (*)>1
    EMP_ID EMP_NAME                                     SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         2 semon                                          20000

SQL> select * from employee e1
where rowid in (select max(rowid) from employe e2
 where e1.emp_id=e2.emp_id and
  e1.emp_name=e2.emp_name and e1.salary=e2.salary);

 
    EMP_ID EMP_NAME                                     SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         3 xyz                                             30000
         2 semon                                         20000

 
 
2. 删除的几种方法:

 
(1)通过建立临时表来实现
SQL>create table temp_emp as (select distinct * from employee) 
SQL> truncate table employee; (清空employee表的数据)
SQL> insert into employee select * from temp_emp;  (再将临时表里的内容插回来)

 
( 2)通过唯一rowid实现删除重复记录.在Oracle中,每一条记录都有一个rowid,rowid在整个数据库中是唯一的,rowid确定了每条记录是在Oracle中的哪一个数据文件、块、行上。在重复的记录中,可能所有列的内容都相同,但rowid不会相同,所以只要确定出重复记录中那些具有最大或最小rowid的就可以了,其余全部删除。
SQL>delete from employee e2 where rowid not in (
        select max(e1.rowid) from employee e1 where
        e1.emp_id=e2.emp_id and e1.emp_name=e2.emp_name and e1.salary=e2.salary);--这里用min(rowid)也可以。

 
SQL>delete from employee e2 where rowid <(
        select max(e1.rowid) from employee e1 where
        e1.emp_id=e2.emp_id and e1.emp_name=e2.emp_name and
                  e1.salary=e2.salary);

 
(3)也是通过rowid,但效率更高。
SQL>delete from employee where rowid not in (
        select max(t1.rowid) from employee t1 group by
         t1.emp_id,t1.emp_name,t1.salary);--这里用min(rowid)也可以。
 

 
    EMP_ID EMP_NAME                                     SALARY
---------- ---------------------------------------- ----------
         1 sunshine                                      10000
         3 xyz                                             30000
         2 semon                                         20000

 

 

我来说两句】 【加入收藏】 【返加顶部】 【打印本页】 【关闭窗口
中搜索 在SQL中删除重复记录
本类热点文章
  SQL Server中约束的介绍
  SQL SERVER 图像或大文本的输入输出
  SQL Server 2005与XML的紧密整合
  join 使用详解方式
  sql server的cube操作符使用详解
  取汉字拼音首字母的存储过程
  两台SQL Server数据同步解决方案
  SQL Server 2005中的T-SQL增强
  在SQL中删除重复记录
  SQL语句导入导出大全
  SQL Server 2005中的CLR
  SQL SERVER实用经验技巧集
最新分类信息我要发布 
最新招聘信息

关于我们 / 合作推广 / 给我留言 / 版权举报 / 意见建议 / 广告投放  
Copyright ©2003-2024 Lihuasoft.net webmaster(at)lihuasoft.net
网站编程QQ群   京ICP备05001064号 页面生成时间:0.00392