發(fā)簡(jiǎn)信
IP屬地：北京
-
Java 8的Optional的正確打開(kāi)方式
本文在理清Optional的基本用法的同時(shí)，附帶對(duì)比Optional中的map/flatMap和stream中的map/flatMap。 問(wèn)題 ...
-
Protobuf中少見(jiàn)的八進(jìn)制編碼.md
問(wèn)題 最近使用protobuf（google出品的一種序列化協(xié)議）存儲(chǔ)中文時(shí)，看到一種類(lèi)似\346\200\241\346\200\241\34...
-
中流擊水浪遏飛舟 2018總結(jié)
前言 人的一生，是小伙伴漸漸走丟的過(guò)程，是吧？ 這一年 鬼鬼變成了佛系龜，一年換兩次工作，據(jù)說(shuō)還給潘老師的工作心態(tài)造成了不良影響，我只能說(shuō)抱歉了...
-
我的2018年度總結(jié)
序言 今年是值得總結(jié)的一年，不知道多久沒(méi)寫(xiě)年度總結(jié)，每年的變化的很多，但生活總是匆忙前行無(wú)暇他顧，更沒(méi)有力氣下筆回顧。 年度關(guān)鍵詞 換工作 佛系...
-
如何優(yōu)雅的停止SparkStreaming應(yīng)用進(jìn)程
問(wèn)題 流式計(jì)算時(shí)需要中斷程序，可能會(huì)造成當(dāng)前正在處理的數(shù)據(jù)丟失，或者重復(fù)處理 解決 對(duì)于spark-streaming 在spark-defau...
-
新裝機(jī)不識(shí)別原SSD硬盤(pán)Windows10系統(tǒng)問(wèn)題解決問(wèn)題描述 換了新主板之后，原來(lái)正常運(yùn)行的SSD找不到開(kāi)機(jī)啟動(dòng)項(xiàng)，SSD在主板中可以被識(shí)別到。(在BIOS中可以看到有硬盤(pán)編號(hào)) 相關(guān)設(shè)備型號(hào) 主...
-
Spark-streaming運(yùn)行一段時(shí)間后報(bào)Accept timed out問(wèn)題解決
Accept timed out 異常堆棧 原因 是spark對(duì)相同的IP不同的host別名識(shí)別為不同的主機(jī)，如：spark-streaming...
-
Spark應(yīng)用不能使用crontab啟動(dòng)問(wèn)題的解決
問(wèn)題 我希望定時(shí)執(zhí)行一個(gè)spark任務(wù)，來(lái)做數(shù)據(jù)同步在crontab中設(shè)定了定時(shí)啟動(dòng)spark-submit，到時(shí)間后，只有腳本的日志，并沒(méi)有執(zhí)...
-
Spark報(bào)錯(cuò)解決：java.lang.OutOfMemory, unable to create new native thread
報(bào)錯(cuò) java.lang.OutOfMemory, unable to create new native threadCaused by: j...