设为首页 收藏本站
查看: 1358|回复: 0

[经验分享] Centos6.3安装hadoop笔记

[复制链接]

尚未签到

发表于 2015-7-14 10:59:32 | 显示全部楼层 |阅读模式
  ---恢复内容开始---
  三台虚拟机,硬盘20G,网络连接方式Bridge(因为物理机器是机房的这样我可以用自己的电脑连接虚拟机)
  分区
  /boot    100M
  /           5000M
  swap     1000M
  /usr       3000M
  /var       1000M
  /tmp      500M
  /home    剩余空间
  
  Master.Hadoop
  ip:192.168.81.20
  netmask:255.255.255.0
  getway:192.168.81.254
  dns:10.100.100.18
  
  Slave01.Hadoop
  ip:192.168.81.21
  netmask:255.255.255.0
  getway:192.168.81.254
  dns:10.100.100.18
  
  Slave02.Hadoop
  ip:192.168.81.22
  netmask:255.255.255.0
  getway:192.168.81.254
  dns:10.100.100.18
  安装选择Minimal
  软件包选择
    「基本系统」中的「基本」
  「开发」中的「开发工具」
  「语言支持」中选中「中文支持」
    
  安装完成后
  创建新用户



useradd hadoop
passwd hadoop
关闭防火墙及SELinux



#关闭防火墙
service iptables stop
chkconfig iptables off
service ip6tables stop
chkconfig ip6tables off


#关闭SELinux
vim /etc/sysconfig/selinux
  将   SELINUX=enforcing   改为    SELINUX=disabled
  再执行



setenforce 0
getenforce
  关闭不必要的服务



for SERVICES in abrtd acpid auditd avahi-daemon cpuspeed haldaemon mdmonitor messagebus udev-post; do chkconfig ${SERVICES} off; done
  
  

VSFTP安装及配置
  检查VSFTP是否已经安装(注意要以root进行)



chkconfig --list | grep vsftpd  #查看是否装有vsftpd服务
  如果没有结果,表示还没有安装VSFTP。
  安装vsftpd



yum -y install vsftpd
touch /var/log/vsftpd.log  #创建日志文件

  完成了vsftp的安装,但是如果你现在想这样ftp://your_ip来访问的话,那还不行,还需要配置权限!
  配置其自启动



chkconfig vsftpd on
  或者



chkconfig –level 2345 vsftpd on
  查看与管理ftp服务:
  启动ftp服务:service vsftpd start
  查看ftp服务状态:service vsftpd status
  重启ftp服务:service vsftpd restart
  关闭ftp服务:service vsftpd stop
  
  

配置vsfpd服务
  编辑/etc/vsftpd/vsftpd.conf文件,配置vsftp服务:



vim /etc/vsftpd/vsftpd.conf
  
  
  先按键盘上的"a"就可以进行编辑了,按照下面进行操作。
  

  anonymous_enable=YES --> anonymous_enable=NO //不允许匿名用户访问,默认是允许
  xferlog_file=/var/log/vsftpd.log #设定vsftpd的服务日志保存路径。注意,该文件默认不存在。必须要手动touch出来
  #idle_session_timeout=600 --> idle_session_timeout=600 //会话超时,客户端连接到ftp但未操作,默认被注释掉,可根据个人情况修改
  #async_abor_enable=YES --> async_abor_enable=YES //支持异步传输功能,默认是注释掉的,去掉注释
  #ascii_upload_enable=YES --> ascii_upload_enable=YES //支持ASCII模式的下载功能,默认是注释掉的,去掉注释
  #ascii_download_enable=YES --> ascii_download_enable=YES //支持ASCII模式的上传功能,默认是注释掉的,去掉注释
  #ftpd_banner=Welcome to blah FTP service //FTP的登录欢迎语,本身是被注释掉的,去不去都行
  #chroot_local_user=YES -->chroot_local_user=YES
  //禁止本地用户登出自己的FTP主目录,本身被注释掉,去掉注释

  
  下面几个都是已经去掉的,只是写出来,明白其用意。
  

  local_enable=YES //允许本地用户访问,默认就是YES,不用改
  write_enable=YES //允许写入,默认是YES,不用改
  local_umask=022 //上传后文件的权限掩码,不用改
  dirmessage_enable=YES //开启目录标语,默认是YES,开不开无所谓,我是默认就行
  xferlog_enable=YES //开启日志,默认是YES,不用改
  connect_from_port_20=YES //设定连接端口20
  xferlog_std_format=YES //设定vsftpd的服务日志保存路径,不用改
  
  pam_service_name=vsftpd //设定pam服务下vsftpdd的验证配置文件名,不用改
  userlist_enable=YES //拒绝登录用户名单,不用改
  TCP_wrappers=YES //限制主机对VSFTP服务器的访问,不用改(通过/etc/hosts.deny和/etc/hosts.allow这两个文件来配置)

  
  按照上面修改完之后,按键盘"Esc"退出编辑,再按":",并在后面输入"wq",进行保存并退出。
  

配置iptables防火墙
  查看一下防火墙允许的端口号



service iptables status
  
  对"/etc/sysconfig/iptables"进行配置:

  vim /etc/sysconfig/iptables

  添加下面的内容。

  -A INPUT -m state --state NEW -m tcp -p tcp --dport 21 -j ACCEPT
  -A INPUT -m state --state NEW -m tcp -p tcp --dport 20 -j ACCEPT

  
  

设置selinux问题



getsebool -a | grep ftp

  [iyunv@Master ~]# getsebool -a | grep ftp
allow_ftpd_anon_write --> off
allow_ftpd_full_access --> off
allow_ftpd_use_cifs --> off
allow_ftpd_use_nfs --> off
ftp_home_dir --> off
ftpd_connect_db --> off
ftpd_use_passive_mode --> off
httpd_enable_ftp_server --> off
tftp_anon_write --> off
  
  把allow_ftpd_full_access和ftp_home_dir两个的值设置为"on"。



setsebool -P ftp_home_dir 1
setsebool -P allow_ftpd_full_access 1
重启相关服务



service vsftpd restart
  最后把防火墙重新启动一下。

  service iptables restart

  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  
  ---恢复内容结束---

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-86627-1-1.html 上篇帖子: Hadoop日记Day4---去除HADOOP_HOME is deprecated 下篇帖子: [大牛翻译系列]Hadoop(11)MapReduce 性能调优:诊断一般性能瓶颈
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表