设为首页 收藏本站
查看: 2153|回复: 0

[经验分享] 虚拟化Hadoop集群的部署和管理 - 基本操作

[复制链接]

尚未签到

发表于 2018-10-31 12:16:53 | 显示全部楼层 |阅读模式
  在Big Data Extensions(BDE)上不仅可以在分钟级别非常快速地部署Hadoop集群,这点可以通过前文《大数据虚拟化零起点-6基础运维第五步-使用CLI创建Apache Hadoop集群》和《大数据虚拟化零起点-7基础运维第六步-安装Big Data Extensions Plugin》感受到。部署完成后,BDE还能够方便地管理它们,从软件定义的角度,通过简单的图形界面和直观的命令行两种方法对集群的对象进行管理。下面我们就具体展开,讨论这些日常所需的集群运行管理。
打开和关闭Hadoop集群
  使用CLI方式:
  1. 打开Serengeti CLI,连接Serengeti服务器
  2. 输入命令行:
  serengeti>cluster stop --name
  例如:serengeti>clusterstop --name cponlycluster
  3. 命令行界面会显示关闭cluster的进度,直到完成。
DSC0000.png \

  我们再使用GUI的方式去看同一个Hadoop集群,再试图重新开启它。
  1.登录vSphere web client,进入Big Data Extensions界面
  2.进入Big Data Cluster界面,可以找到刚才关闭的Hadoop集群也显示Stopped状态了。
  3.现在直接在图形界面重新开启它,选中该集群,右键菜单选择Start Big Data Cluster
DSC0001.png

  4.该集群开始运行,显示Starting状态,并显示进度条。直到完全启动,并显示Running状态。
  这时候切换到命令行模式,查看该集群的话,它的运行状态也是Running,都应该是一致的。
删除Hadoop集群
  删除集群在虚拟化环境中相当于对文件进行操作,非常简单,它利用vSphere操作虚拟机,从而回收对应的虚拟机文件夹里的文件,在1分钟即可搞定。所腾出的空间和运算资源可以立刻被其他虚拟机利用。而在物理环境下,对Hadoop集群的回收要达到同等效果,要对集群的所有物理机器进行清理和格式化,资源重新被分配的周期更是进一步拉长。
  命令行的操作步骤:
  serengeti>cluster delete --name
  例如:serengeti>clusterdelete --name testcluster
  用户也可以通过Big Data Extensions的Web图形界面来操作:
  1.打开vSphere Web Client, 进入BigData Extension界面
  2.选择所要删除的集群
  3.右键菜单选择Delete Big Data Cluste
DSC0002.png

  目标集群的状态会显示Deleting,直到集群被完全删除。
  在下一篇文章里,我们会讨论灵活方便地扩展Hadoop集群,以及时满足业务的变化。
  如有任何问题,您可以发邮件至bigdata_apac@vmware.com。
  关于vSphere Big Data Extensions:
  VMwarevSphere Big Data Extensions(简称BDE)基于vSphere平台支持大数据和ApacheHadoop作业。BDE以开源Serengeti项目为基础,为企业级用户提供一系列整合的管理工具,通过在vSphere上虚拟化ApacheHadoop,帮助用户在基础设施上实现灵活、弹性、安全和快捷的大数据部署、运行和管理工作。了解更多关于VMware vSphere Big Data Extensions的信息,请参见http://www.vmware.com/hadoop。
  作者简介:
DSC0003.png

  张君迟
  VMware大数据解决方案项目经理
  目前负责VMware大数据解决方案的管理和市场工作。曾担任VMware数据库管理产品vFabric Data Director产品经理,对虚拟化、云计算、关系型数据库和大数据等企业产品、技术方案和市场有深入的理解和实战经验。在此之前,就职于Microsoft从事分布式系统的产品管理和研发工作。


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-628961-1-1.html 上篇帖子: Hadoop如何修改HDFS文件存储块大小 下篇帖子: hadoop的安全模式
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表