前言 Spark YarnShuffleService是作為Hadoop Yarn模塊中NodeManager的輔助服務(wù)寄生在其進程內(nèi)部，大家都知道可以通過這個外部服務(wù)來削減...
發(fā)簡信
IP屬地：上海
-
記一次Spark Yarn Shuffle Service升級引發(fā)的血案 -
SpringBoot上傳文件大小限制的配置
使用SpingBoot框架上傳文件時，如果文件大小超過了1MB，會報錯： 原因是SpringBoot內(nèi)置的Tomcat的文件傳輸默認(rèn)單個文件最大1M，單次請求文件總數(shù)大小為1...
-
降低 Java 程序的“虛擬內(nèi)存地址”占用0. 問題 最近業(yè)務(wù)方反饋我們的一個 Java 寫的 agent 內(nèi)存占用過高： 業(yè)務(wù)方是通過 top 命令查看 VIRT 數(shù)值過高，但是通常來說我們都是采用 RES 衡量內(nèi)...
-
EasyCode(代碼神器)Easycode是IDEA的一個插件，可以直接對數(shù)據(jù)的表生成entity,controller,service,dao,mapper,無需任何編碼，簡單而強大。 1、安裝(E...
-
Google Guava之CacheBuilder
在什么場景下需要使用緩存呢？ 緩存在很多場景下都是需要使用的。比如在需要一個值的過程和代價特別高的情況下，而且對這個值的需要不止一次的情況下，我們可能就需要考慮使用緩存了。 ...
-
docker-compose搭建zookeeper集群
準(zhǔn)備zookeeper鏡像 這里使用官方提供的鏡像，版本為3.4.11 docker-compose分布式管理組件，具體安裝以及使用方法見github項目 準(zhǔn)備docker-...
-
Presto源碼分析之SliceSlice是Presto里面用來對內(nèi)存高效地、自由地進行操作的接口。它在Presto里面很關(guān)鍵, Presto里面另外一個關(guān)鍵類 Block 就大量用到了它，要充分理解 Bl...
-
如何 “干掉” if...else
前言 if...else 是所有高級編程語言都有的必備功能。但現(xiàn)實中的代碼往往存在著過多的 if...else。雖然 if...else 是必須的，但濫用 if...else...
