论坛 › Hadoop › hadoop2.4.0集群安装spark1.3.0-Levy

mr923 发表于 2018-10-30 09:03:57

hadoop2.4.0集群安装spark1.3.0-Levy

export JAVA_HOME=/home/spark/jdk1.7　　
export HADOOP_CONF_DIR=/home/hadoop/hadoop2.4.0/etc/hadoop
　　

　　
export SPARK_HOME=/home/hadoop/spark-1.3.0-bin-2.4.0
　　
export SPARK_JAR=$SPARK_HOME/lib/spark-assembly-1.3.0-hadoop2.4.0.jar
　　
export PATH=$SPARK_HOME/bin:$PATH
　　
export SPARK_MASTER_IP=test1
　　
export SPARK_WORKER_CORES=1
　　
export SPARK_WORKER_INSTANCES=1
　　
export SPARK_MASTER_PORT=7077
　　
export SPARK_WORKER_MEMORY=1g
　　
export MASTER=spark://${SPARK_MASTER_IP}:${SPARK_MASTER_PORT}

查看完整版本: hadoop2.4.0集群安装spark1.3.0-Levy