IP屬地：浙江
-
Hadoop配置Kerberos互信
當(dāng)Hadoop集群開啟Kerberos后，跨集群訪問需要配置Kerberos cross-realm(跨域訪問)。 Kerberos跨域訪問原理...
-
HBase RegionServer動態(tài)感知過程HBase支持集群動態(tài)擴(kuò)容，都?xì)w功于HMaster對HRegionServer的動態(tài)感知。本文基于hbase-1.2.0-cdh5.7.2版本進(jìn)...
-
HBase 壓縮策略DateTieredCompactionPolicyHBase是采用Log-Structured Merge Tree的架構(gòu)，隨著Flush階段的不斷觸發(fā)，生成許多的HFile（默認(rèn)128M），而...
-
spark application job自定義日志輸出前言 spark默認(rèn)采用log4j作為日志框架，并且采用${SPARK_HOME}/conf/log4j.properties作為默認(rèn)的日志配置...
-
開發(fā)部署HBase Endpoint Coprocessor一、前言 本文示例協(xié)處理器實現(xiàn)根據(jù)scan條件對指點列進(jìn)行count、avg。這里推薦HBase技術(shù)社區(qū)文章，該文非常詳細(xì)的介紹了如何開發(fā)并部署...
-
python2訪問CDH HBase Thrift2簡介 HBase Thrift Server是hbase基于Apache Thrift開發(fā)用來提供對多語言支持的服務(wù)。同時保留了thrift和t...
-
Unable to start NodeManager: no leveldbjni64-1.8 in java.library.path近日生產(chǎn)CDH5.7.2集群中的某一臺機(jī)器在升級glibc和java后，Yarn NodeManager無法正常啟動，提示報錯如下： 處理該問題...
-
HBase meta表介紹
在網(wǎng)上較多的文章都會介紹hbase的兩個關(guān)鍵表ROOT表與meta表。其實在hbase0.98之后，hbase就廢棄了ROOT表，僅保留meta...
-
CDH開啟HBase Replication一、環(huán)境準(zhǔn)備 1、要求兩套集群安裝相同的CDH版本，如都為CDH4或者CDH5，不限定小版本2、要求兩套集群網(wǎng)絡(luò)互通，至少保證Master HB...