如果沒有worker節點,可以考慮將所有任務都分配給master節點來執行。可以通過調整Spark配置文件中的spark.executor.instances參數來限制只在master節點上啟動executor實例。這樣雖然會影響并行處理能力,但至少可以保證任務能夠在集群中順利執行。另外,也可以嘗試在集群中添加新的worker節點,以增加集群的計算資源。
spark.executor.instances
億速云公眾號
手機網站二維碼
Copyright ? Yisu Cloud Ltd. All Rights Reserved. 2018 版權所有
廣州億速云計算有限公司粵ICP備17096448號-1 粵公網安備 44010402001142號增值電信業務經營許可證編號:B1-20181529