|NO.Z.00014|——————————|Deployment|——|Hadoop&OLAP数据库管理系统.v14|——|Kylin.v05|Spark-standalone集群模式|core/m

一、集群模式--Standalone模式

### --- 检查集群状态

~~~     # 启动服务
[root@hadoop01 ~]# start-dfs.sh 
[root@hadoop01 ~]# start-yarn.sh
[root@hadoop01 ~]# start-all-spark.sh

~~~     # 检查集群状态

[root@hadoop00 ~]# jps

Hadoop01：Master、Worker
Hadoop02：Worker
Hadoop03：Worker

二、使用浏览器查看：http://hadoop01:8080/

---

三、Standalone配置

### --- 测试在 spark-env.sh 中增加参数，分发到集群，重启服务：

[root@hadoop01 ~]# vim $SPARK_HOME/conf/spark-env.sh

export SPARK_WORKER_CORES=10
export SPARK_WORKER_MEMORY=20g

[root@hadoop01 ~]# rsync-script $SPARK_HOME/conf/spark-env.sh
 
[root@hadoop01 ~]# stop-all-spark.sh 
[root@hadoop01 ~]# start-all-spark.sh  

三、在浏览器中观察集群状态，测试完成后将以上两个参数分别改为10、20g，重启服务。

### --- 修改回默认的配置
~~~     发送到其它主机并重启服务

[root@hadoop01 ~]#  vim $SPARK_HOME/conf/spark-env.sh
# export SPARK_WORKER_CORES=1
# export SPARK_WORKER_MEMORY=2g

---

                 

---

Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of life.It sinks, and I am ready to depart                                                                                                                                                    ——W.S.Landor

---