设为首页 收藏本站
查看: 1032|回复: 0

[经验分享] Hadoop自学系列集(一)

[复制链接]

尚未签到

发表于 2017-6-22 10:58:43 | 显示全部楼层 |阅读模式
  1.概述
    笔者的学习环境--在VMware虚拟机下安装四个CentOS系统(搭建Hadoop集群用),其中一个为Master,三个为Slave,Master作为Hadoop集群中的NameNode,三个Slave作为DataNode。同时我们将四个CentOS系统的IP设置为静态,防止IP变化而导致集群不可用(IP变化了,就得修改配置才能使用Hadoop集群了)
2.安装VMware  
  DSC0000.png
    下载完毕后双击运行,然后想安装其他软件一样一直点击下一步,即可完成安装。安装位置可以修改一下,笔者安装目录是: D:\developer\VMware Workstation。
  注:序列号可以百度搜   
  3.安装CentOS   
  下面我们开始安装CentOS系统,笔者这里选择的是CentOS6.7 32位系统,提供一下下载地址:http://mirror.symnds.com/distributions/CentOS-vault/6.7/isos/i386/CentOS-6.7-i386-bin-DVD1.iso.下载完成后我们开始安装。
  
  3.1. 这里就不截图了,打开我们安装好的VMware,点击新建虚拟机,选择典型(推荐)(T),下一步,这里学习一下CentOS的安装,下面就不选择VMware的自动安装了,直接选择稍后安装操作系统,再下一步选择操作系统类型,选择linux,版本选择CentOS即可(如果是安装64位的CentOS选择CentOS 64位),点击下一步选择安装位置和名称,这里笔者将名称修改为HadoopMaster(其他三台安装时分别改为HadoopSlave1,HadoopSlave2,HadoopSlave3),位置统一安装在了D:\developer\Virtual Machines\目录下(安装位置和名称可以自行修改),之后的步骤一直使用默认选项即可,即一直点击下一步完成安装。
  
  3.2. 调整虚拟机设置,可以编辑内存和处理器等信息,CentOS6以上系统建议选择内存大于632MB,笔者选择1024MB,即1GB。继续选择CD/DVD,默认单选按钮选择的是使用物理启动器,这里改为使用ISO镜像文件,并选择下载好的CentOS-6.7-i386-bin-DVD1.iso所在位置。网络适配器改为桥接模式,桥接模式可以和局域网内所有电脑通信,建议选择此模式。
    3.3 点击开启虚拟机,进入CentOS安装界面,选择第一项之后就是如下图所示界面     
       DSC0001.png
  3.4.
选择skip,跳过测试,直接进行安装
            DSC0002.png
         3.5.
界面出现后点击下一步,语言选择English>U.S.English,点击下一步    
          DSC0003.png

        3.6.
  选择安装的存储设备,选择基础存储设备Basic storage Devices,点击下一步,会询问是否丢弃数据,因为我们是新装系统,选择Yes丢弃数据,之后就是配置主机名,直接使用默认的,所以我们还是选择下一步

  3.7.接下来选择时区,我是中国人,在下拉列表中选择Asia/Shanghai就行了,当然,知道地图上的位置也可以点击位置选中上海,再次点击下一步      
  
   DSC0004.png
  

          3.8. 随后设置密码,这里笔者的密码就不告诉你们了,有小秘密哦!这里设置的就是root用户的密码,密码强度太弱的会出现提示,直接选择使用此密码即可(Use Anyway),继续下一步
   DSC0005.png
          3.9.如下图所示,让我们选择安装类型,我们这里选择创建自定义布局(Create Custom Layout),继续下一步

DSC0006.png

      3.10.
  下面是选择分区,原来写了发布后图片有不见了,这里在写一遍吧。我们分四个分区--boot,swap,/,和home。其中boot为系统启动分区,存放的是引导文件,因为文件比较小,分个100-200MB就足够了;swap分区(又称"交换分区")作用是当系统的物理内存不够用的时候,把硬盘空间中的一部分空间释放出来,以供当前运行的程序使用,建议大小是内存的两倍,如果大于4G设置为何内存大小相等;home分区是用户文件存放分区,创建的用户都会在此分区,大小根据具体使用此系统的用户数量决定;/(根分区)就相当于顶级分区,没什么具体的意义,一般会把剩余的空间都分配给根分区。这里就剩下部分图片了,原先保存发布的时候不见了一部分,可能是我不太会用TinyMCE,哎~~~~
  
         DSC0007.png
     DSC0008.png
  
    DSC0009.png
     DSC00010.png

  3.11.
  
   分区完毕后选择安装类型,有桌面系统,最小安装等选择,这里选择Basic Server吧,不太熟悉linux的朋友们建议选择此类型。之后一直下一步就可以完成安装了,安装完成后点击reboot进行重启,重启完成后输入用户名和密码就可以登录了,至此完成完成。由于之前的图片没了,就没有截图了,实在不好意思啊,下次得先保存一下了。
  
   3.12. 按此方法在另装三台,也可以使用VMware的完整克隆功能克隆出三台slave,但是这个网络可能会出现问题,下一篇中的内容补充上次问题的描述和解决方法吧。
 4.下集预告
    下篇就写jdk的安装吧,相信大家都会安装吧,但是这是笔记啊,还是得做啊,烦请大家多多支持喽!!!
  
    

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-386846-1-1.html 上篇帖子: vmware workstation unrecoverable error: (vmui)报错解决方法 下篇帖子: 使用VMware新建一个Linux系统虚拟机
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表