设为首页 收藏本站
查看: 1320|回复: 0

[经验分享] Isilon整合Hadoop

[复制链接]

尚未签到

发表于 2018-11-1 09:11:34 | 显示全部楼层 |阅读模式
  EMC在大数据分析上下了大笔投注,并整合Hadoop文件系统到其Isilon向外扩展的文件管理器,提供并允许他们的Greenplum分析产品使用Hadoop数据。
  Hadoop是一种对象式的分布式和可扩展的开源文件系统(HDFS),跨datanodes(数据节点)和一个单一的NameNode(命名节点)的集群实现,在一个更大的集群中,带有第二个NameNode来快照主节点的数据结构,并在主节点失败时用作重建资源。NameNode包含关于在datanodes上文件存储的元数据,在需要时为它们服务。
  HDFS今天流行在大学,特别是在生命科学领域,以及一些Web 2.0应用。 EMC强调的一部分是NameNode是一个单点故障,实际上没有针对它的高可用性,他们声称,排除了其用于企业级数据中心的可能性。该公司估计,有一个巨大的机会去提供Hadoop系统,在企业数据中心里用于大数据分析,如果HDFS能够可用达到企业级强健度,并由普通存储管理员管理的话。这就为什么要提供一个针对Greenplum HD分析前端的Isilon-HDFS整合存储后端。
  EMC的Isilon OneFS v6.5版本,提供了一个一站式的Apache Hadoop商店,它被看作Hadoop世界缺少的设施,即:
  · 一个共享的,而不是一个专用的存储基础设施;
  · 高可用性的NameNode;
  · 通过快照(SnapshotIQ),复制(SyncIQ)和备份(NDMP备份)的保护;
  · 提高存储效率超过3倍,从基本HDFS的数据镜像到80%的水平;
  · 单独扩展计算和容量的能力;
  · 自动化数据导入/导出通过NDS,CIFS,FTP,和HTTP
  Isilon的产品管理总监Nick Kirsch,谈到NameNode的实施:“这是唯一的。NameNode现在是我们的分布式元数据的一部分,每个节点都是一个NameNode。”
  下一代Greenplum已经被Apache Hadoop认证,提供平台管理和控制,以及与Greenplum数据库的并行分析访问。EMC公司还提供设计和培训服务,世界各地的24x7支持和发展路线图。
  EMC对比了他们与甲骨文和NetApp的方法,与任何一个都不同,EMC声称可以在他们的存储阵列上提供Hadoop的原生整合;针对NameNode的完整HA;相同级别的存储效率;多协议访问和企业级保护功能。
  普渡大学曾在其统计部门试用Isilon/Hadoop的组合并获得认可,他们说:“现在没有一个单独的Hadoop数据竖井的需求,它们的用户现在有了“一个单一的共享存储资源,针对数据计算和分析。”他的统计人员做出更多的统计信息并付出更少的Hadoop基​​础设施管理。
  EMC公司声称这些新增的功能,将会使Hadoop更多的用于企业,并且企业Hadoop的用户将越来越多地看到数据科学家(见Wikibon的描述)来统计分析他们有意义的大数据集——信息。毕竟,决策数据的能力是大数据的获利。
  在Isilon上的EMC Greenplum HD可立即通过EMC及其渠道合作伙伴销售。


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-629195-1-1.html 上篇帖子: hadoop安装配置:使用cloudrea-linuxjcq 下篇帖子: hadoop中System.out.println输出
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表