91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

DataGrip 連接 HiveServer2 報錯的原因是什么

發布時間:2020-10-29 17:57:54 來源:億速云 閱讀:203 作者:Leah 欄目:開發技術

DataGrip 連接 HiveServer2 報錯的原因是什么?很多新手對此不是很清楚,為了幫助大家解決這個難題,下面小編將為大家詳細講解,有這方面需求的人可以來學習下,希望你能有所收獲。

一、Heap memory

Exception in thread "main" java.lang.OutOfMemoryError: Java heap space

因為 DataGrip 會開好幾個 Session,我這里是 4 個 Session

DataGrip 連接 HiveServer2 報錯的原因是什么

因此有時候如果執行的語句過大,會造成堆內存來不起回收。導致堆內存溢出,反應在 DataGrip 就是執行語句卡住沒反應,等很久然后報錯。這里有個超時時間,等很久就是超過這個超時時間后報錯。

我們可以適當調大 heap 內存:

# 在 hive/bin 目錄下的 hive-config.sh,最后一行就是設置 heap 的大小。
 69 # Default to use 256MB
 70 export HADOOP_HEAPSIZE=${HADOOP_HEAPSIZE:-2048}

二、Too many open files

DataGrip 連接 HiveServer2 報錯的原因是什么

lzq@hadoop102 ~ ulimit -a
-t: cpu time (seconds)    unlimited
-f: file size (blocks)    unlimited
-d: data seg size (kbytes)   unlimited
-s: stack size (kbytes)    8192
-c: core file size (blocks)   0
-m: resident set size (kbytes)  unlimited
-u: processes      10000
-n: file descriptors    4096
-l: locked-in-memory size (kbytes) 64
-v: address space (kbytes)   unlimited
-x: file locks      unlimited
-i: pending signals     31830
-q: bytes in POSIX msg queues  819200
-e: max nice      0
-r: max rt priority     0
-N 15:        unlimited

修改最大文件連接數量

  •  Linux 任何外部設備(socket、文件)都可以看做一個文件,而一個文件就可以通過一個文件描述符來讀寫。
  • -n: file descriptors 4096 描述的就是一進程可以打開文件最大的數量
  • 默認是1024,我們可以通過命令 ulimit -n 4096 把最大打開文件調整到 4096,如果重啟會還原成默認值
  • 永久設置方法
vim /etc/security/limits.conf 
在最后加入
* soft nofile 65535 
* hard nofile 65535 

安裝 lsof

 sudo yum install lsof -y

查看當前系統打開的文件數量

lsof | wc -l 
watch "lsof | wc -l" 
 lzq@hadoop102 ~ jps
25696 Jps
1522 NameNode
22627 RunJar
1716 DataNode
3140 Kafka
2309 NodeManager
2647 QuorumPeerMain
22889 RunJar
23322 RunJar

查看某一進程的打開文件數量

# RunJar 就是 HiveServer2 的進程
lsof -p pid | wc -l 
lsof -p 22627 | wc -l 
lsof -p 22889 | wc -l
lsof -p 23322 | wc -l

看完上述內容是否對您有幫助呢?如果還想對相關知識有進一步的了解或閱讀更多相關文章,請關注億速云行業資訊頻道,感謝您對億速云的支持。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

苍山县| 西平县| 铅山县| 林芝县| 甘德县| 兴隆县| 南宫市| 昂仁县| 嫩江县| 梁平县| 上饶市| 乌苏市| 三亚市| 高唐县| 吉林省| 临颍县| 泊头市| 泰兴市| 郁南县| 南木林县| 清水河县| 垫江县| 左贡县| 昌宁县| 裕民县| 乐山市| 新密市| 蓝山县| 湖口县| 佳木斯市| 建宁县| 芦溪县| 南乐县| 海宁市| 政和县| 武邑县| 屏东县| 新津县| 北票市| 五指山市| 贵溪市|