91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

怎么關閉spark自動廣播參數

小億
297
2024-06-04 15:28:18
欄目: 大數據

關閉Spark的自動廣播參數可以通過設置spark.sql.autoBroadcastJoinThreshold參數為一個較大的值或者設置為-1來禁用自動廣播。具體的操作步驟如下:

  1. 在啟動Spark應用程序的時候,可以通過--conf選項來設置spark.sql.autoBroadcastJoinThreshold參數的值。例如:
./bin/spark-submit --conf spark.sql.autoBroadcastJoinThreshold=-1 --class your_main_class your_spark_application.jar
  1. 在代碼中通過SparkSession對象來設置spark.sql.autoBroadcastJoinThreshold參數的值。例如:
val spark = SparkSession.builder()
  .appName("YourAppName")
  .config("spark.sql.autoBroadcastJoinThreshold", -1)
  .getOrCreate()

通過以上兩種方式設置spark.sql.autoBroadcastJoinThreshold參數的值為-1,即可關閉Spark的自動廣播參數。

0
兴安县| 新化县| 西安市| 淳安县| 门头沟区| 马龙县| 仁化县| 梨树县| 防城港市| 集贤县| 台前县| 华池县| 东阳市| 双桥区| 饶阳县| 宁海县| 宝清县| 南靖县| 遂昌县| 万载县| 武城县| 蕲春县| 绍兴市| 常山县| 明水县| 视频| 射洪县| 虞城县| 商都县| 衡水市| 武鸣县| 仙游县| 昂仁县| 焦作市| 屯门区| 岳池县| 北京市| 合川市| 红河县| 昌平区| 拜泉县|