怎样安装使用Standalone模式

 时间:2024-11-15 10:07:28

构建一个由怡觎现喾Master+Slave构成的Spark集群,使Spark程序运行在集群中,且有Cluster与Client模式两种。主要区别在于:Driver程序的运行节点。

怎样安装使用Standalone模式

方法/步骤

1、1)进入spark安装目录下的conf文件夹

怎样安装使用Standalone模式

2、2)修改配置文件名称

怎样安装使用Standalone模式

3、3)修改slave文件,添加work节点:

怎样安装使用Standalone模式

4、4)修改spark-env.sh文件,添加如下配置:

怎样安装使用Standalone模式

5、5)分发spark包

怎样安装使用Standalone模式

6、6)启动

怎样安装使用Standalone模式

7、网页溽朽孑臾查看:hadoop102:8080注意:如果遇到“JAVA_HOMEnotset”异常,可以在sbin目录下的spark-config.sh文件中加入如下配置:

怎样安装使用Standalone模式

8、7)官方求PI

怎样安装使用Standalone模式

怎样安装使用Standalone模式

9、8)启动sparkshell

怎样安装使用Standalone模式

10、参数:--masterspark://hadoop102:7077指邈赕瑟遂定要连接的集群的master执行WordCount程序

怎样安装使用Standalone模式

判断是否为同一个对象 熊出没之熊大快跑电脑版如何下载 熊出没之熊大快跑【最新攻略】 C#EXE相互引用实现 java中怎么获取鼠标位置
热门搜索
感恩卡图片 图片搜索软件 精美壁纸图片大全 咪咕电影 电影院的英文