设为首页 收藏本站
查看: 3333|回复: 0

[经验分享] hadoop 2.6.0源码编译

[复制链接]

尚未签到

发表于 2018-10-30 12:22:33 | 显示全部楼层 |阅读模式
  这里面选择的HADOOP的版本为2.6.编译前需要准备的如下工具:
  

  HADOOP:   hadoop-2.6.0-src.tar.gz
  JDK:   jdk-7u71-linux-x64.tar.gz
  MAVEN:  apache-maven-3.0.5-bin.tar.gz
  PROTOBUF:   protobuf-2.5.0.tar.gz
  FINDBUGS:    findbugs-3.0.0.tar.gz
  ANT:  apache-ant-1.9.4-bin.tar.gz
  1、分别解压hadoop、JDK、MAVEN 、PROTOBUF 、FINDBUGS 、 ANT。这里以/app为根目录:
  tar -zxvf  hadoop-2.6.0-src.tar.gz
  tar -zxvf    jdk-7u71-linux-x64.tar.gz
  tar -zxvf   apache-maven-3.0.5-bin.tar.gz
  tar -zxvf   protobuf-2.5.0.tar.gz
  tar -zxvf    findbugs-3.0.0.tar.gz
  tar -zxvf   apache-ant-1.9.4-bin.tar.gz
  对解压后的JDK 、ANT、PROTOBUF 、FINDBUGS重命名:
  mv jdk-7u71-linux-x64   jdk7
  mv protobuf-2.5.0  protobuf
  mv findbugs-3.0.0  findbugs
  mv apache-ant-1.9.4 ant
  2、配置环境变量
  export JAVA_HOME=/app/jdk7
  export MAVEN_HOME=/app/apache-maven-3.0.5
  export ANT_HOME=/app/ant
  export FINDBUGS_HOME=/app/findbugs

  export>  export PATH=.:$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$MAVEN_HOME/bin:$ANT_HOME/bin:$FINDBUGS_HOME/bin:$PATH:$CLASSPATH
  3、分别验证安装是否成功:
  java -version
  java version "1.7.0_71"
  Java(TM) SE Runtime Environment (build 1.7.0_71-b14)
  Java HotSpot(TM) 64-Bit Server VM (build 24.71-b01, mixed mode)
  mvn -version
  Apache Maven 3.0.5 (r01de14724cdef164cd33c7c8c2fe155faf9602da; 2013-02-19 21:51:28+0800)
  Maven home: /app/apache-maven-3.0.5
  Java version: 1.7.0_71, vendor: Oracle Corporation
  Java home: /app/jdk7/jre
  Default locale: zh_CN, platform encoding: UTF-8
  OS name: "linux", version: "2.6.32-431.el6.x86_64", arch: "amd64", family: "unix"
  ant -version
  Apache Ant(TM) version 1.9.4 compiled on April 29 2014
  findbugs -version
  3.0.0
  如果出现上面的提示,说明 安装成功
  4、安装 protobuf所有依赖:
  yum install gcc
  yum intall gcc-c++
  yum install make
  yum install cmake
  yum install openssl-devel
  yum install ncurses-devel
  5、安装protobuf-2.5.0.tar.gz:
  cd /app/profobuf 目录中执行如下登命令:
  ./configure
  make
  make check
  make install
  验证:
  protoc --version
  libprotoc 2.5.0
  6、编译HADOOP:
  cd /app/hadoop-2.6.0-src
  在该目录中用如下命令:
  mvn clean install -DskipTests
  mvn package -DskipTests -Pdist ,native ,docs -Dtar 或者
  mvn package -Pdist,native -DskipTests -Dtar
  由于这里面没有配置MAVEN镜象地址所以下载比较慢。接下来就是等了。
  7、查看编译完的文件:
  cd /app/hadoop-2.6.0-src/hadoop-dist/target/hadoop-2.6.0/lib/native
  用如下命令:
  file *
  显示如下已经编译成功:
  libhadoop.a:        current ar archive
  libhadooppipes.a:   current ar archive
  libhadoop.so:       symbolic link to `libhadoop.so.1.0.0'
  libhadoop.so.1.0.0: ELF 64-bit LSB shared object, x86-64, version 1 (SYSV), dynamically linked, not stripped
  libhadooputils.a:   current ar archive
  libhdfs.a:          current ar archive
  libhdfs.so:         symbolic link to `libhdfs.so.0.0.0'
  libhdfs.so.0.0.0:   ELF 64-bit LSB shared object, x86-64, version 1 (SYSV), dynamically linked, not stripped


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-628490-1-1.html 上篇帖子: hadoop2.4 编译Eclipse插件 下篇帖子: hadoop daemonlog实现
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表