[HBase] 查詢(xún)Hbase,zk連接數(shù)過(guò)多問(wèn)題

轉(zhuǎn)自 集群 zk 連接數(shù)過(guò)多問(wèn)題排查

【大數(shù)據(jù)】集群 zk 連接數(shù)過(guò)多問(wèn)題排查

背景:

周末接受到信總報(bào)警,說(shuō)我們查詢(xún) hbase 的服務(wù)日志爆了,回頭看應(yīng)用日志,發(fā)現(xiàn)一直在報(bào) zk 的連接問(wèn)題

image

到集群上看了下 801 主機(jī) zk 連接數(shù)量居然達(dá)到了 2040,查看下 zk 的 maximum client connect 配置為 2000

超過(guò)了最大連接數(shù),自然會(huì)報(bào)錯(cuò)。

image

登陸應(yīng)用主機(jī),輸入

netstat -an | grep -I 2181

檢查和 zk 的連接

發(fā)現(xiàn)確實(shí)上千

思考了一下查詢(xún) hbase 什么時(shí)候會(huì)和 zk 建立連接?

每次建立 Hbase 連接的時(shí)候會(huì)去建立 zk 的連接,Hbase 連接應(yīng)該是單例的類(lèi),檢查代碼發(fā)現(xiàn)

image

Connection 為方法參數(shù),這樣勢(shì)必會(huì)造成 connection 每次創(chuàng)建完不釋放的問(wèn)題
改為靜態(tài)變量問(wèn)題解決:

image
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀(guān)點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容