1.問(wèn)題背景 用戶(hù)提交Spark應(yīng)用到Y(jié)arn上時(shí)，可以通過(guò)spark-submit的num-executors參數(shù)顯示地指定executor個(gè)數(shù)，隨后，Applicatio...
發(fā)簡(jiǎn)信
IP屬地：江蘇
-
Spark：Dynamic Resource Allocation【動(dòng)態(tài)資源分配】 -
Hive Format異常分析最近在執(zhí)行Hive insert/select語(yǔ)句的過(guò)程碰到下面這種類(lèi)型的異常： 本文已上述的錯(cuò)誤為切入點(diǎn)，分析下異常原因以及Hive相關(guān)的關(guān)于Format的異常。主要內(nèi)容如...
-
圖解SSH原理1. 初見(jiàn)SSH SSH是一種協(xié)議標(biāo)準(zhǔn)，其目的是實(shí)現(xiàn)安全遠(yuǎn)程登錄以及其它安全網(wǎng)絡(luò)服務(wù)。 SSH僅僅是一協(xié)議標(biāo)準(zhǔn)，其具體的實(shí)現(xiàn)有很多，既有開(kāi)源實(shí)現(xiàn)的OpenSSH，也有商業(yè)實(shí)現(xiàn)...