您好,登錄后才能下訂單哦!
Linux 下運行spark local bind on port 0. Attempting port 1 問題
2016-11-01 16:04:56 [org.apache.spark.util.Utils]-[WARN] - Service 'sparkDriver' could not bind on port 0. Attempting port 1.
2016-11-01 16:04:56 [org.apache.spark.SparkContext]-[ERROR] - Error initializing SparkContext.
java.net.BindException: Can't assign requested address: Service 'sparkDriver' failed after 16 retries! Consider explicitly setting the appropriate port for the service 'sparkDriver' (for example spark.ui.port for SparkUI) to an available port or increasing spark.port.maxRetries.
原因是找不到主機對應的ip地址,而不是端口綁定不正確引起的。
在hosts中加入如下代碼
127.0.0.1 hostname
這里的用戶名根據實際情況來寫,這樣,spark local 就能找到本地對應的ip了,啟動成功
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。