路人王
spark2.4.4-hadoop2.7 请对用好你的版本
准备好6台机器 一台master 6台worker
解压完成后
进入conf目录 修改两个文件
1.spark-env.sh
export JAVA_HOME=/usr/java/jdk1.8.0_231
export SPARK_MASTER_HOST=spark00
export SPARK_MASTER_PORT=7077
export SPARK_DAEMON_JAVA_OPTS="-Dspark.deploy.recoveryMode=ZOOKEEPER -Dspark.deploy.zookeeper.url=spark00:2181,spark01:2181,spark02:2181 -Dspark.deploy.zookeeper.dir=/spark"
评论