设为首页 收藏本站
查看: 484|回复: 0

[经验分享] Oracle删除重复数据的实际操作方案

[复制链接]
YunVN网友  发表于 2016-8-14 07:31:52 |阅读模式
  在Oracle删除重复数据的实际操作过程中,有时会出现这种的相关情况,就是某个表因为原来设计的不周全,导致现在表里面的某些数据重复,针对这一情况我们应如何对真些重复的数据进行删除呢?
  重复的数据可能有这样两种情况,第一种时表中只有某些字段一样,第二种是两行记录完全一样。
  一、对于部分字段重复数据的删除
  先来谈谈如何查询重复的数据吧。
  下面语句可以查询出那些数据是重复的:select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1
  
  将上面的>号改为=号就可以查询出没有重复的数据了。
  想要删除这些重复的数据,可以使用下面语句进行Oracle删除重复数据
  delete from 表名 a where 字段1,字段2 in (select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1)
  
  上面的语句非常简单,就是将查询到的数据删除掉。不过这种删除执行的效率非常低,对于大数据量来说,可能会将数据库吊死。所以我建议先将查询到的重复的数据插入到一个临时表中,然后对进行删除,这样,执行删除的时候就不用再进行一次查询了。如下:
  CREATE TABLE 临时表 AS (select 字段1,字段2,count(*) from 表名 group by 字段1,字段2 having count(*) > 1)
  
  上面这句话就是建立了临时表,并将查询到的数据插入其中。
  下面就可以进行这样的删除操作了:
  delete from 表名 a where 字段1,字段2 in (select 字段1,字段2 from 临时表);
  
  这种先建临时表再进行Oracle删除重复数据的操作要比直接用一条语句进行删除要高效得多。
  这个时候,大家可能会跳出来说,什么?你叫我们执行这种语句,那不是把所有重复的全都删除吗?而我们想保留重复数据中最新的一条记录啊!大家不要急,下面我就讲一下如何进行这种操作。
  在oracle中,有个隐藏了自动rowid,里面给每条记录一个唯一的rowid,我们如果想保留最新的一条记录,
  我们就可以利用这个字段,保留重复数据中rowid最大的一条记录就可以了。
  下面是查询重复数据的一个例子:
  select a.rowid,a.* from 表名 a where a.rowid != ( select max(b.rowid) from 表名 b where a.字段1 = b.字段1 and a.字段2 = b.字段2 )
  
  下面我就来讲解一下,上面括号中的语句是查询出重复数据中rowid最大的一条记录。
  而外面就是查询出除了rowid最大之外的其他重复的数据了。
  由此,我们要Oracle删除重复数据,只保留最新的一条数据,就可以这样写了:
  delete from 表名 a where a.rowid != ( select max(b.rowid) from 表名 b where a.字段1 = b.字段1 and a.字段2 = b.字段2 )
  
  随便说一下,上面语句的执行效率是很低的,可以考虑建立临时表,讲需要判断重复的字段、rowid插入临时表中,然后删除的时候在进行比较。
  create table 临时表 as select a.字段1,a.字段2,MAX(a.ROWID) dataid from 正式表 a GROUP BY a.字段1,a.字段2; delete from 表名 a where a.rowid != ( select b.dataid from 临时表 b where a.字段1 = b.字段1 and a.字段2 = b.字段2 ); commit;
  
  二、对于完全重复记录的删除
  对于表中两行记录完全一样的情况,可以用下面语句获取到去掉重复数据后的记录:
  select distinct * from 表名
  
  可以将查询的记录放到临时表中,然后再将原来的表记录Oracle删除重复数据,最后将临时表的数据导回原来的表中。如下:
  CREATE TABLE 临时表 AS (select distinct * from 表名); drop table 正式表; insert into 正式表 (select * from 临时表); drop table 临时表;
  
  如果想删除一个表的重复数据,可以先建一个临时表,将去掉重复数据后的数据导入到临时表,然后在从临时表将数据导入正式表中,如下:


  • INSERT INTO t_table_bak select distinct * from t_table;  

  以上的相关内容就是对@@@@@@@的介绍,望你能有所收获。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-257556-1-1.html 上篇帖子: 经分系统在ORACLE中的应用2 下篇帖子: Oracle表空间的设置问题的描述
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表