Spark on YARN怎么配置的

2024-12-26 01:08:03
推荐回答(1个)
回答1:

安装好hadoop后,自带yarn
然后将hadoop中的hdfs-site.xml,yarn-site.xml,core-site.xml配置文件拷贝一份到spark的conf目录中;
运行spark程序时,在spark-submit中指定--master yarn-client就可以了
具体可以看看spark-submit的指令说明