设为首页 收藏本站
查看: 2154|回复: 6

[经验分享] 详谈云存储重复数据删除

[复制链接]
累计签到:77 天
连续签到:1 天
发表于 2012-6-30 10:06:15 | 显示全部楼层 |阅读模式
重复数据删除技术,压缩和其他形式的数据优化通过在备份、归档和主存储上减少现有数据的总容量,实现高的投资回报率,并且数据也得到最大程度的优化。容量节省是可以迅速看到的,而资金的节省只有看到推迟或基本上不用购买更多存储时,大家才意识到优化的好处。云存储是根据每月产生的使用容量来收费的,云存储重复数据删除技术优化解决方案在下一个账单周期内可以提供一个投资回报。

每月的投资回报率(ROI)

云存储作为一个备份目标或归档目标都允许用户异地备份或归档数据,分散了实地存储的成本。不好的一面是虽然实地存储的成本分散了,可是,因为云存储服务的使用,产生了持续的存储成本。结果任何云存储上数据的优化就显示了每月的即时成本节省,同时也需要花费额外的努力和处理时间来最大程度减少数据,这样数据在性能方面就并不那么敏感了,因此微小的性能代价也是值得的。事实上,因为更少的数据需要通过广域网连接传输,对于网络也许是一个性能提升。

云存储服务可以作为没有具体设备的外包模型部署,而最常见的则是应用一个混合的模式。这种模式的公司如Bycast, Nirvanix和Iron Mountain公司都在你的站点安装一个设备。这个设备对用户来说看起来就像一个有无限大存储的NAS,同时支持NFS和 CIFS协议。把数据传到云上,然后再把数据传到一个本地的NAS中。云的迁移是在背后透明的发生的。设备在用户友好NFS/CIFS和更常见的网络协议诸如webdev或HTTP 之间转换。重要的一点是,虽然是存储在NAS上,可它所表现的可以无限大的存储也是需要根据IT部门每月使用的容量来收费的。根据你的数据类型,重复数据删除技术可以每月减少存储4倍到10倍。

云存储重复数据删除技术

当努力实现优化基于云的存储时,实施重复数据删除技术的方式是非常重要的。重复数据删除云存储不能通过一个存储平台实现。如果重复数据删除技术键入到OS或存储系统中,它不知道如何和基于云的存储互动。云存储是不同的,但接入的接口可能是通过一个云网关,下面的OS肯定是不同的。

重复数据删除云存储接下来需要一个单独的重复数据删除技术软件设备,一般是来源于像Ocarina Networks公司这样可以有实际存储平台的独立公司,并且不要求从事特定存储平台,换句话说,它必须具备优化任何类型存储的能力,当然也包括云存储。像Ocarina这样的公司比其他公司先进了一步,它不仅可以删除之前写入云存储的数据,也能减少删除归档应用的开支。

优化WAN带宽

广域网带宽是在环境中应用或考虑应用云存储的另一个需要关心的问题。需要在广域网传输的大量数据也要仔细的关注。带宽的增加要求广域网带宽成本的增加,这个增加很可能作为跨用户群体接入云存储服务被扩展,且它的用途也被大家所理解。升级广域网带宽的要求可以消除任何来自云存储的节约的成本。

扩展云归档到云备份

在未进入云之前,可以优化数据的重复数据删除技术可以控制带宽成本。它能也允许这些归档只是系统被备份处理使用。当备份软件应用创造一个备份,特别是一个全备份,它就创建一个大的文件或一系列文件,这些文件都包含所有的需要备份的独立文件。这个文件然后就被写入磁盘。

现在的问题是,磁盘和之前包含全备份存储的作为一个新文件的文件非常相似。为了保证专有,开发了重复数据删除系统来删除冗余数据;这些做得还不错,但他们不能和另一个存储厂商的云存储服务一起运作。但是存储不受限制(agnostic)的解决方案却可以。

云重复数据删除架构

从结构上,一个存储不受限(agnostic)的优化器可以存在于一个专用设备内,这个设备然后可以分析满足某个标准的指定文件系统,大小等,最后迁移到云存储设备上。在迁移期间,文件将会通过重复数据删除技术和压缩来最大程度的减少数据。最后,只有精简后的文件被存储在云NAS上,这样也可以达到节省成本的要求。

云存储NAS供应商可以和像Ocarina Networks公司来合作,整合优化器到他们的本地组成,在每GB成本战中,他们将处于巨大的价格竞争优势。不管哪种云存储重复数据删除技术的部署形式,都是对用户有益的,云存储是更独立的,同时也是成本更高效的传统存储的转变。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-410-1-1.html 上篇帖子: 巧妙解决服务器虚拟化与存储管理问题 下篇帖子: 几种存储技术的比较(FC SAN、IP SAN、DAS、NAS) 存储 数据

尚未签到

发表于 2013-3-13 18:32:46 | 显示全部楼层
帮帮顶顶!!

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-5-15 18:56:30 | 显示全部楼层
小手一抖,钱钱到手!

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-5-16 05:54:00 | 显示全部楼层
佛曰,色即是空,空即是色!今晚,偶想空一下

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-5-16 20:32:59 | 显示全部楼层
穿别人的鞋,走自己的路,让他们找去吧。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-5-17 10:31:02 | 显示全部楼层
一时的冲动,子孙的危机!

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

尚未签到

发表于 2013-5-18 00:15:02 | 显示全部楼层
人生不能像做菜、把所有的料都准备好才下锅!

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表