有時候有沒有這么一種情況，我拿到了一個sql,csv,parquet文件，一起來就想寫sql，不想寫那些亂七八糟的的東西，只是想快速實現(xiàn)我要的聚合查詢數(shù)據(jù)。那么我們可以利用s...
發(fā)簡信
IP屬地：廣東
-
Spark - SQL查詢文件數(shù)據(jù) -
Phoenix自定義函數(shù)UDF異常解決方案
在Phoenix客戶端使用自定義函數(shù)UDF時候是正常的,但是在本地測試的時候報Function類找不到的異常。 異常演示 例子 CRC32Function.java 導(dǎo)入ph...
-
-
Java 與 Scala 使用Maven混合編譯打包
在SpringBoot上使用spark的時候會遇到的混合編譯問題，在java代碼中打包會找不到scala定義的包，即可參考使用如下配置。 使用配置
-
SpringBoot 自動生成API文檔
在做項目的時候，如果項目是前后分離的，后端一定要和前端或者是移動端對接接口，那么問題來了，接口是不是要自己寫給他們看，一般的會采用Excel或者Word來寫，高級一點的就采用...
-
Phoenix自定義函數(shù)UDF異常解決方案
在Phoenix客戶端使用自定義函數(shù)UDF時候是正常的,但是在本地測試的時候報Function類找不到的異常。 異常演示 例子 CRC32Function.java 導(dǎo)入ph...
-
HDFS_DELEGATION_TOKEN 還原及解決方案HDFS_DELEGATION_TOKEN 這個BUG在很多文章中都出現(xiàn)著，講了很多原理，但是只給出了官方引用地扯，完全沒有給出如何解決，我們線上的業(yè)務(wù)就有著這樣的問題，7天...
-
Java 定位導(dǎo)致CPU飆升的代碼過程
線上的一個日志實時輸出的程序曾經(jīng)出過這樣一個問題，剛開始上線java程序占用的CPU的資源很少,但是到了整點的時候,CPU直線飆高，直接到達(dá)100%根本沒有要下降的趨勢，唯一...
-
Java - VisualVM 安裝 plugins Visual GC
在Java VisualVM這款java性能分析及調(diào)優(yōu)工具如何加載插件？比如漂亮的Visual GC，大豬我比較喜歡這款漂亮的姑娘，當(dāng)然了，如果覺得這是阻止了小伙伴們的進步，...
