设为首页 收藏本站
查看: 769|回复: 0

[经验分享] 关于Oracle去除重复的问题

[复制链接]

尚未签到

发表于 2016-7-30 21:45:20 | 显示全部楼层 |阅读模式
  1):Oracle的row_number() over函数消除重复的记录
  例子:

1.select d.id,d.outer_code from dict_depts_source d order by outer_code(查看重复数据)
2.select d.id,d.outer_code,row_number() over(partition by outer_code order by outer_code) row_flag from dict_depts_source d(标识重复数据)
3.delete from dict_depts_source where id in(
select id from(select d.id,d.outer_code,row_number() over(partition by outer_code order by outer_code) row_flag from dict_depts_source d)t
where t.row_flag > 1)(删除重复数据)
3.select d.id,d.outer_code,row_number() over(partition by outer_code order by outer_code) row_flag from dict_depts_source d(检查删除效果)
   row_number() over ([partition by col1] order by col2) ) as 别名
表示根据col1分组,在分组内部根据 col2排序
而这个“别名”的值就表示每组内部排序后的顺序编号(组内连续的唯一的),[partition by col1] 可省略。

  2)

distinct这个关键字来过滤掉多余的重复记录只保留一条,但往往只用 它来返回不重复记录的条数,而不是用它来返回不重记录的所有值。其原因是distinct只有用二重循环查询来解决,而这样对于一个数据量非常大的站来说,无疑是会直接影响到效率的。   下面先来看看例子:
  table表
  字段1 字段2
id name
1 a
2 b
3 c
4 c
5 b
  库结构大概这样,这只是一个简单的例子,实际情况会复杂得多。
  比如我想用一条语句查询得到name不重复的所有数据,那就必须使用distinct去掉多余的重复记录。
  select distinct name from table
得到的结果是:
   
  ----------
  name
a
b
c
  好像达到效果了,可是,我想要得到的是id值呢?改一下查询语句吧:

select distinct name, id from table
   结果会是:
  ----------
  id name
1 a
2 b
3 c
4 c
5 b
  distinct怎么没起作用?作用是起了的,不过他同时作用了两个字段,也就是必须得id与name都相同的才会被排除。。。。。。。
  我们再改改查询语句:

select id, distinct name from table
   
  很遗憾,除了错误信息你什么也得不到,distinct必须放在开头。难到不能把distinct放到where条件里?能,照样报错。
  ------------------------------------------------------------------------------------------------------------
  下面方法可行:

select *, count(distinct name) from table group by name
   结果:
  id name count(distinct name)
1 a 1
2 b 1
3 c 1

  最后一项是多余的,不用管就行了,目的达到。。。。。
  group by 必须放在 order by 和 limit之前,不然会报错
  
   项目中实际用到的  例如从重复记录里面只取一条记录

1.SELECT PACTGOODID,PACTID,ORDERCODE,ORDERID,GOODNAME,ROW_NUMBER() OVER(PARTITION BY PACTID ORDER BY PACTID) ROW_FLAG FROM ENTRUST_PACT_GOODS
2.SELECT * FROM (SELECT PACTGOODID,PACTID,ORDERCODE,ORDERID,GOODNAME,ROW_NUMBER() OVER(PARTITION BY PACTID ORDER BY PACTID) ROW_FLAG FROM ENTRUST_PACT_GOODS GOODS) WHERE ROW_FLAG = 1
  

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-251412-1-1.html 上篇帖子: oracle 谨慎授予用户dba权限 下篇帖子: Oracle数据库操作总结之一
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表