设为首页 收藏本站
查看: 1183|回复: 0

[经验分享] Hyper-V Server 重复数据删除

[复制链接]
累计签到:1 天
连续签到:1 天
发表于 2014-12-18 08:37:01 | 显示全部楼层 |阅读模式
本帖最后由 wuyvzhang 于 2016-8-2 17:27 编辑

重复数据删除指的是在数据中查找和删除重复内容,而不会影响其保真度或完整性。其目标是通过将文件分割成大小可以改变 (32-128 KB) 的小区块、确定重复的区块,然后为每个区块保留一个副本,从而在更小的空间中存储更多的数据。区块的冗余副本由对单个副本的引用所取代。区块会进行压缩,然后以特殊的容器文件形式组织到 System Volume Information 文件夹中。Windows Server 2012/R2开始集成重复数据删除技术,通过使用Windows Server 2012/R2内置的重复数据删除功能,企业可以极大的改善存储空间的使用效率问题。对于大部分企业 IT 部门,存储效率都是个真正的大问题,因为存储成本的下降速度远远不能抵消数据量的增长速度。为降低增加存储空间的需求,需要对数据存储效率进行改善,无论数据保存在数据存储中,或者通过广域网络(WAN)进行移动,都是一个大问题。为了对这种增长做出响应,企业 IT 部门会对文件服务器进行整合。与此同时,还会将存储的扩展与优化作为其存储整合平台的一个主要目标。 Windows Server 2012/R2 的重复数据删除技术主要提供下列功能: 1. 容量优化。重复数据删除技术使得您能够用较少的物理空间存储更多数据。您可以获得比以往的单实例存储(SIS)或 NTFS 压缩更高的存储效率。重复数据删除技术使用了尺寸可变的块与压缩技术,通过配合即可对常规文件服务器实现最高 2:1 的优化率,虚拟化 VHD 库的优化率更可高达 20:1。 2. 改善可扩展性与性能。重复数据删除是一项高扩展性,资源高效率型,并且非侵入式的技术。该技术可同时运行于多个主要的大型数据卷上,但不会影响服务器的其他负载。对 CPU 与内存资源的使用进行限制,则可将对服务器负载的影响降到最低。此外,您还可获得足够的灵活性,设置重复数据删除技术的运行时间,指定可被该功能使用的资源数量,并针对要进行重复数据删除的文件类型建立策略。 3. 可靠性与数据完整性。在应用重复数据删除技术时,还必须保证维持数据完整性。对于数据完整性,Windows Server 2012/R2 会利用校验、一致性以及身份验证等机制。此外,为了能够在出错后恢复数据,Windows Server 2012/R2还会对所有元数据以及最常被引用的数据创建冗余。 4. 通过 BranchCache 提高带宽效率。通过与 BranchCache 的集成,这种优化磁盘上存储空间效率的技术还可用于对通过 WAN 将数据传往分支办公室的效率有所提高。这种集成可提供更快的文件下载速度,同时可降低带宽消耗。 wKiom1SRhi6QwrVmAADpW3KOfC4869.jpg 为了提供更优化的重复数据删除技术,Windows Server 2012/R2 实施子文件数据块与压缩功能。因此对每个文件都可进行磁盘上转换,具体过程请参考上图。文件不再作为独立的数据流加以存储,而是被指向通用块存储中数据块的子文件所代替。副本消除技术可应用给很多负载,通常可节约 50-90% 的存储空间,如下图所示。具体的实施对于服务器上的主要负载都是透明的。这是通过调度与选择性优化,使其对 I/O 的影响降到最低实现的,此外通过较低的资源(CPU/内存)占用,还可将对服务器的影响降到最低。另外,该技术还针对更高数据完整性进行了优化. 这是通过对所有数据以及原数据进行数据完整性验证实现的,并且对于所有原数据以及“受欢迎”的数据块,还会创建冗余。运行 Windows Server 2012/R2 的服务器上通过启用重复数据删除技术,并配合 BranchCache 一起使用,即可对磁盘上以及传输中的文件应用算法,获得节约,最终可获得更快的下载速度,同时减少广域网络带宽的占用。 wKiom1SRhi6Q7sT7AABzvVY6hN4943.jpg 随着数据量以及对存储和基础架构预算影响力的持续增长,Windows Server 2012 中的重复数据删除技术可提供更清晰,可度量的投资收益。 以上信息来源于TechNet官网 以下演示安装并配置重复数据删除功能 1. 登陆服务器“BJ-VMHost-01”,打开服务器管理器,点击添加功能与角色 2. 选择服务器角色页面,展开文件和存储服务,展开文件和iSCSI服务,勾选“数据删除重复” wKiom1SRhi7jVKWGAAEAo7VzWVQ415.jpg 3. 确认安装所选内容无误后点击安装,等待重复数据删除功能晚装完成 wKiom1SRhi_R96H3AADr21j-jDw656.jpg 4. 安装完成后在服务器管理器页面点击文件文件和存储服务,点击卷,此时能看见仪表盘中以列出重复数据删除相关信息 wKiom1SRhi_RVJqoAACSLb9IKRY955.jpg 5. 右键卷,选择配置重复数据删除 wKioL1SRhtGxTYO-AADcyFVt8tg189.jpg 6. 重复数据删除设置向导将出现,这里可以选择已禁用、一般用途文件服务器或者VDI服务器,这里选择一般用途文件服务器 wKioL1SRhtKD5CvDAAChUxmG5hY762.jpg 7. 如果不想对特定文件扩展名进行重复数据删除,例如.doc文件,则选择要排除的文件扩展名 wKioL1SRhtWimx_GAACFsBBtk_Q932.jpg 8. 可以设定多长时间的文件执行重复数据删除 wKioL1SRhtWCKUoZAAA2fw14_70522.jpg 9. 点击“添加”选择要从重复数据删除中排除所选定的文件夹及其子文件 wKioL1SRhtWSl4PcAABAxS29KAs653.jpg 10.点击设置删除重复计划,以设置删除作业,可根据实际场景设置作业时间 wKioL1SRhtbjfi7mAAGLDXzMRTU929.jpg 11.开始执行重复数据删除前,设定开始时间 wKioL1SRhtbzoMM_AAD3ghT6A1E224.jpg 12.等待开始执行重复数据删除 wKioL1SRhteQjx9GAADUijtFlKo513.jpg 13.使用重复数据删除这一功能只能在非系统分区之下执行 wKioL1SRhtjSx1qCAADFeKPakK4124.jpg 使用Windows PowerShell安装并配置重复数据删除则分别键入以下命令 1) 以管理员权限打开Windows PowerShell 2) Import-Module ServerManager 3) Add-WindowsFeature -name FS-Data-Deduplication 4) 启用重复数据删除 Enable-DedupVolume D: 5) 设置文件进行重复数据删除前,应保留的最少天数 Set-Dedupvolume D: -MinimumFileAgeDays 20 6) 使用 Start-DedupJob按照需要在 Windows PowerShell 中触发优化作业 Start-DedupJob –Volume D: –Type Optimization 7) 使用 Get-DedupJob查询作业的进度 8) Get-DedupJob SO娱乐城:真_人.足球.彩票齐全| 开户送10元.首存送58元.手机可投ネ注任何游戏顶级信用ネ提现即时到账SO.CC

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-38214-1-1.html 上篇帖子: Hyper-V Server卸载数据传输(ODX) 下篇帖子: Hyper-V Server 存储空间
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表