oracle 删除重复数据

来源:asp之家 时间:2009-07-23 14:46:00 

重复的数据可能有这样两种情况,第一种: 表中只有某些字段一样,第二种是两行记录完全一样。

一、对于部分字段重复数据的删除

1.查询重复的数据  
select 字段1,字段2, count(*) from 表名 group by 字段1,字段2 having count(*) > 1   
例:Select owner from dba_tables group by owner having count(*)>1;
Select owner from dba_tables group by owner having count(*)=1; //查询出没有重复的数据  

2.删除重复的数据

delete from 表名 a where 字段1,字段2 in (select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1)
这种删除执行的效率非常低,对于大数据量来说,可能会将数据库吊死。
另一种高效率的方法是先将查询到的重复的数据插入到一个临时表中,然后再进行删除。
CREATE TABLE 临时表 AS
(
select 字段1,字段2, count(*) as row_num
from 表名
group by 字段1,字段2
having count(*) > 1
);
  上面这句话就是建立了临时表,并将查询到的数据插入其中。
  下面就可以进行这样的删除操作了:
delete from 表名 a
where 字段1,字段2 in (select 字段1,字段2 from 临时表);  

3.保留重复数据中最新的一条记录

在Oracle中,rowid是隐藏字段,用来唯一标识每条记录。所以,只要保留重复数据中rowid最大的一条记录就可以了。  
查询重复数据:
select a.rowid,a.* from 表名 a
where a.rowid != (
select max(b.rowid) from 表名 b
where a.字段1 = b.字段1 and a.字段2 = b.字段2 );   
例:selete from dba_tables a
where a.rowid!=(
select max(rowid) from test b
where a.owner=b.owner);
  删除重复数据,只保留最新的一条数据:
delete from 表名 a
where a.rowid != (
select max(b.rowid) from 表名 b
where a.字段1 = b.字段1 and a.字段2 = b.字段2 )
  使用临时表实现高效查询
create table 临时表 as
(select a.字段1, a.字段2, MAX(a.ROWID) as dataid from 正式表 a
GROUP BY a.字段1,a.字段2);
delete from 表名 a
where a.rowid !=
( select b.dataid from 临时表 b
where a.字段1 = b.字段1 and
a.字段2 = b.字段2 );
commit;

二、对于完全重复记录的删除

对于表中两行记录完全一样的情况,可以用下面语句获取到去掉重复数据后的记录:
select distinct * from 表名
可以将查询的记录放到临时表中,然后再将原来的表记录删除,最后将临时表的数据导回原来的表中。如下:
CREATE TABLE 临时表 AS (select distinct * from 表名);
drop table 正式表;
insert into 正式表 (select * from 临时表);
drop table 临时表;   假如想删除一个表的重复数据,可以先建一个临时表,将去掉重复数据后的数据导入到临时表,然后在从临时表将数据导入正式表中,如下: INSERT INTO t_table_bak
select distinct * from t_table;

标签:oracle,删除,重复数据
0
投稿

猜你喜欢

  • 如何让新安装的MySQL数据库变得更安全

    2009-01-04 13:19:00
  • XML简易教程之四

    2008-09-05 17:19:00
  • pjblog3相关日志功能(支持生成静态模式)

    2008-11-20 13:41:00
  • 2008年情人节各网站节日Logo欣赏

    2008-02-17 14:12:00
  • 在Win 2003中配置ASP.net环境

    2007-10-14 12:02:00
  • ASP 下载时重命名已上传文件的新下载文件名的实现代码

    2012-11-30 20:33:45
  • 网页标准化-CSS命名规划整理

    2007-12-10 18:13:00
  • 加快Firefox 3.5启动速度的方法

    2009-07-16 15:22:00
  • MYSQL教程:查询优化之有效加载数据

    2009-02-27 15:45:00
  • jquery 使用点滴函数代码

    2011-05-21 16:12:00
  • 背景图片千万不要gzip压缩,尤其是PNG

    2009-06-19 12:42:00
  • aspjpeg组件安装问题

    2008-09-27 17:52:00
  • 使用Microsoft SQL Server 2000全文搜索功能构建Web搜索应用程序

    2008-09-29 12:32:00
  • HTML5本地存储初探(二)

    2010-03-07 15:47:00
  • oracle 触发器 学习笔记

    2009-05-24 19:57:00
  • FckEditor配置手册中文教程详细说明

    2010-02-28 12:37:00
  • 用ASP木马实现FTP和解压缩

    2008-02-13 08:47:00
  • button标签的type属性默认值是?

    2010-08-16 12:33:00
  • Mootools 1.2教程(3)——数组使用简介

    2008-11-17 20:16:00
  • XML 增、删、改和查示例

    2008-09-05 17:12:00
  • asp之家 网络编程 m.aspxhome.com