设为首页 收藏本站
查看: 429|回复: 0

[经验分享] win764bit下Eclipse连接ubuntu中hadoop2.6经验总结

[复制链接]

尚未签到

发表于 2018-5-2 08:12:14 | 显示全部楼层 |阅读模式
    作为初学者,总结一下配置hadoop2.6的心得体会。

    首次配置时采用虚拟机中运行Ubuntu14.04,直接配置hadoop2.6,并在其中运行Eclipse。于自己的机子性能较为一般(4核+4G),尝试几个案例时就出现卡的现象。后来尝试CYGWIN代替Ubuntu,但各种配置问题不断产生,不得不放弃。改为在win7(64bit)下采用Eclipse连接ubuntu中hadoop2.6,为了提升性能,ubuntu改为命令行模式下启动,去掉图形化界面。

    Ubuntu下配置hadoop2.6并没遇到太多问题,参照一下博文:                           http://blog.csdn.net/ggz631047367/article/details/42426391

     

     Win7下将hadoop2.6插件配置到Eclipse,参照博文设置虚拟机中Ubuntu与Eclipse配置:http://www.xuebuyuan.com/1415322.html

    文中提及虚拟机网络连接采用桥接模式,本人在实现中采用NAT也是可行的,并未遇到IP变动的问题。插件配置中要涉及到hadoop.tmp.dir的配置是与网上其他攻略不同的地方,在实践中曾因忽略此处,eclipse无法连接上HDFS。



    连接上HDFS文件系统后,建立工程,复制WordCount代码,如果采用的是官网上的Hadoop2.6,因为缺少hadoop.dll与winutils.exe会有异常出现,2.6版本到

http://download.csdn.net/detail/u014310430/8402965#comment下载  亲测可用。放到WIN7下hadoop文件的BIN,中,同时配置环境变量HADOOP_HOME和在Path变量中加入%HADOOP_HOME%\bin,重启电脑。



    Ubuntu去图形界面

    sudo vim /etc/default/gru
     找到:GRUB_CMDLINE_LINUX_DEFAULT="quiet splash",应该是在第11行。复制本行然后把quiet splash替换成text。保存后执行命令更新

    sudo update-grub
     重启后就直接进入文字界面。

    sudo reboot


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-454650-1-1.html 上篇帖子: 搭建本地Ubuntu14.04源 下篇帖子: Ubuntu修改MySQL默认数据库目录
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表