Spark配置worker占用主机资源信息

1.修改spark-env.sh

vim conf/spark-env.sh

2.配置worker资源

# spark worker节点使用主机3核资源
SPARK_WORKER_CORES=3
# spark worker节点使用主机20G内存资源
SPARK_WORKER_MEMORY=20g
如果觉得我的文章对你有用,请随意赞赏