在日常開(kāi)發(fā)中一定會(huì)遇到,spark將計(jì)算好的數(shù)據(jù)load到es中,供后端同學(xué)查詢(xún)使用。下面介紹一下spark寫(xiě)es的方式。 使用scala進(jìn)行演示,對(duì)應(yīng)的java自己goog...
在日常開(kāi)發(fā)中一定會(huì)遇到,spark將計(jì)算好的數(shù)據(jù)load到es中,供后端同學(xué)查詢(xún)使用。下面介紹一下spark寫(xiě)es的方式。 使用scala進(jìn)行演示,對(duì)應(yīng)的java自己goog...
由于換工作,spark最近寫(xiě)的比較少,很多東西都忘了,所以周末就在家復(fù)習(xí)一下。 下面是我在微信讀書(shū)上的學(xué)習(xí)記錄總結(jié)。這邊書(shū)講的比較簡(jiǎn)單,作為復(fù)習(xí),看看是不錯(cuò)的,不建議作為入門(mén)...
今天將舊的go項(xiàng)目全部遷移使用go mod管理。在go get的時(shí)候,出現(xiàn)下面的錯(cuò)誤。 如果上面的問(wèn)題出現(xiàn)在 可以使用下面的方式解決: 10.14 解決方法 在終端直接打開(kāi) ...
scala數(shù)據(jù)類(lèi)型體系圖如下 從上圖可以得到以下結(jié)論: 在 scala 中有一個(gè)根類(lèi)型 Any ,他是所有類(lèi)的父類(lèi). scala中一切皆為對(duì)象,分為兩大類(lèi)AnyVal(值類(lèi)型...
由于近一年一直在寫(xiě)大數(shù)據(jù), go代碼寫(xiě)的比較少,所以就在假期復(fù)習(xí)一下go相關(guān)知識(shí)。 在極客時(shí)間上學(xué)習(xí)了, 下面做了一個(gè)思維導(dǎo)圖,以供后續(xù)復(fù)習(xí)使用。
由于做大數(shù)據(jù)開(kāi)發(fā),使用最多的語(yǔ)言就是scala和python,java。 剛開(kāi)始由于spark是scala開(kāi)發(fā)的,就去學(xué)習(xí)了scala,然后看spark的源碼。 后面就是基于...