您好,登錄后才能下訂單哦!
這篇文章主要講解了“Spark中yarn-site.xml的最小化怎么配置”,文中的講解內容簡單清晰,易于學習與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學習“Spark中yarn-site.xml的最小化怎么配置”吧!
修改配置文件slaves,如下所示:
我們設置Hadoop集群中的從節點為SparkWorker1和SparkWorker2,把slaves文件的內容修改為:
修改配置文件core-site.xml,如下所示:
把core-site.xml文件的內容修改為:
上述是core-site.xml文件的最小化配置
修改配置文件hdfs-site.xml,如下所示:
把hdfs-site.xml文件的內容修改為:
上述是hdfs-site.xml文件的最小化配置
修改配置文件mapred-site.xml,如下所示:
拷貝一份mapred-site.xml.template命名為mapred-site.xml,打開mapred-site.xml
把mapred-site.xml文件的內容修改為:
上述是mapred-site.xml最小化配置
修改配置文件yarn-site.xml,如下所示:
把yarn-site.xml的內容修改為:
感謝各位的閱讀,以上就是“Spark中yarn-site.xml的最小化怎么配置”的內容了,經過本文的學習后,相信大家對Spark中yarn-site.xml的最小化怎么配置這一問題有了更深刻的體會,具體使用情況還需要大家實踐驗證。這里是億速云,小編將為大家推送更多相關知識點的文章,歡迎關注!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。