這篇文章主要介紹如何解決DataGrip連接HiveServer2報(bào)錯(cuò)的問題，文中介紹的非常詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴們一定要看完！

創(chuàng)新互聯(lián)是一家集網(wǎng)站建設(shè),洛浦企業(yè)網(wǎng)站建設(shè),洛浦品牌網(wǎng)站建設(shè),網(wǎng)站定制,洛浦網(wǎng)站建設(shè)報(bào)價(jià),網(wǎng)絡(luò)營銷,網(wǎng)絡(luò)優(yōu)化,洛浦網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè)，幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強(qiáng)企業(yè)競爭力。可充分滿足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時(shí)我們時(shí)刻保持專業(yè)、時(shí)尚、前沿，時(shí)刻以成就客戶成長自我，堅(jiān)持不斷學(xué)習(xí)、思考、沉淀、凈化自己，讓我們?yōu)楦嗟钠髽I(yè)打造出實(shí)用型網(wǎng)站。

DataGrip 連接 HiveServer2 報(bào)錯(cuò)

一、Heap memory

Exception in thread "main" java.lang.OutOfMemoryError: Java heap space

因?yàn)?DataGrip 會開好幾個(gè) Session，我這里是 4 個(gè) Session

因此有時(shí)候如果執(zhí)行的語句過大，會造成堆內(nèi)存來不起回收。導(dǎo)致堆內(nèi)存溢出，反應(yīng)在 DataGrip 就是執(zhí)行語句卡住沒反應(yīng)，等很久然后報(bào)錯(cuò)。這里有個(gè)超時(shí)時(shí)間，等很久就是超過這個(gè)超時(shí)時(shí)間后報(bào)錯(cuò)。

我們可以適當(dāng)調(diào)大 heap 內(nèi)存:

# 在 hive/bin 目錄下的 hive-config.sh，最后一行就是設(shè)置 heap 的大小。
 69 # Default to use 256MB
 70 export HADOOP_HEAPSIZE=${HADOOP_HEAPSIZE:-2048}

二、Too many open files

lzq@hadoop102 ~ ulimit -a
-t: cpu time (seconds)    unlimited
-f: file size (blocks)    unlimited
-d: data seg size (kbytes)   unlimited
-s: stack size (kbytes)    8192
-c: core file size (blocks)   0
-m: resident set size (kbytes)  unlimited
-u: processes      10000
-n: file descriptors    4096
-l: locked-in-memory size (kbytes) 64
-v: address space (kbytes)   unlimited
-x: file locks      unlimited
-i: pending signals     31830
-q: bytes in POSIX msg queues  819200
-e: max nice      0
-r: max rt priority     0
-N 15:        unlimited

修改最大文件連接數(shù)量

•  Linux 任何外部設(shè)備(socket、文件)都可以看做一個(gè)文件，而一個(gè)文件就可以通過一個(gè)文件描述符來讀寫。

• -n: file descriptors 4096 描述的就是一進(jìn)程可以打開文件最大的數(shù)量

• 默認(rèn)是1024，我們可以通過命令 ulimit -n 4096 把最大打開文件調(diào)整到 4096，如果重啟會還原成默認(rèn)值

• 永久設(shè)置方法

vim /etc/security/limits.conf 
在最后加入
* soft nofile 65535 
* hard nofile 65535

安裝 lsof

 sudo yum install lsof -y

查看當(dāng)前系統(tǒng)打開的文件數(shù)量

lsof | wc -l 
watch "lsof | wc -l"

 lzq@hadoop102 ~ jps
25696 Jps
1522 NameNode
22627 RunJar
1716 DataNode
3140 Kafka
2309 NodeManager
2647 QuorumPeerMain
22889 RunJar
23322 RunJar

查看某一進(jìn)程的打開文件數(shù)量

# RunJar 就是 HiveServer2 的進(jìn)程
lsof -p pid | wc -l 
lsof -p 22627 | wc -l 
lsof -p 22889 | wc -l
lsof -p 23322 | wc -l

以上是“如何解決DataGrip連接HiveServer2報(bào)錯(cuò)的問題”這篇文章的所有內(nèi)容，感謝各位的閱讀！希望分享的內(nèi)容對大家有幫助，更多相關(guān)知識，歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道！

網(wǎng)頁標(biāo)題：如何解決DataGrip連接HiveServer2報(bào)錯(cuò)的問題
URL地址：http://chinadenli.net/article32/ppdppc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供標(biāo)簽優(yōu)化、外貿(mào)網(wǎng)站建設(shè)、電子商務(wù)、定制網(wǎng)站、響應(yīng)式網(wǎng)站、手機(jī)網(wǎng)站建設(shè)

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)