發(fā)簡(jiǎn)信
IP屬地：上海
-
HBase多租戶(hù)-Namespace Quota管理
在多租戶(hù)的HBase環(huán)境中,通常給一個(gè)租戶(hù)分配一個(gè)namespace,因此namespace的容量管理是多租戶(hù)管理必不可少的一部分.目前name...
-
JAVA API連接HA(High Available) Hadoop集群
使用JAVA API連接HDFS時(shí)我們需要使用NameNode的地址,開(kāi)啟HA后,兩個(gè)NameNode可能會(huì)主備切換,如果連接的那臺(tái)主機(jī)Name...
-
開(kāi)啟kerberos后HBASE client配置
開(kāi)啟了kerberos之后的集群,用hbase client連接需要增加相應(yīng)的配置,如果配置不正確很容易出現(xiàn)kerberos認(rèn)證失敗的錯(cuò)誤,因?yàn)?..
-
通過(guò)Ambari Rest API獲取hadoop組件配置
Ambari UI上可以很方便地查看及修改hadoop組件的配置.在Java代碼中通過(guò)client訪問(wèn),往往需要通過(guò)設(shè)置環(huán)境變量導(dǎo)入相關(guān)的配置,...
-
Hadoop數(shù)據(jù)生命周期管理框架Apache Falcon簡(jiǎn)介Apache Falcon是一個(gè)開(kāi)源的hadoop數(shù)據(jù)生命周期管理框架, 它提供了數(shù)據(jù)源 (Feed) 的管理服務(wù),如生命周期管理,備份,存檔到...
-
Hadoop和Spark性能監(jiān)控工具Dr. Elephant的編譯、部署及使用
Dr. Elephant是linkedin開(kāi)源的mapreduce和spark作業(yè)的性能監(jiān)控及調(diào)優(yōu)工具, 它開(kāi)發(fā)了可插拔式的啟發(fā)式規(guī)則來(lái)診斷ma...