寒假学习进度3

今天继续spark的学习,今天完成了Standalone 模式的配置和在windows上的运行

首先是Standalone 模式

更改spark目录下conf文件中的salves文件,添加内容

 

 更改spark目录下conf文件中的spark-env文件,添加内容

export JAVA_HOME=/opt/module/jdk1.8.0_144
SPARK_MASTER_HOST=hadoop102
SPARK_MASTER_PORT=8020
 
启动spark sbin/start - all.sh
查看是否启动

 测试

 

 

 windows环境下spark运行

解压spark,在bin目录下下启动

测试

 
原文地址:https://www.cnblogs.com/chenghaixiang/p/15729561.html