@誓言vip 開源出來的東西得有資源快速迭代，我們正在積蓄力量
一站式大數(shù)據(jù)平臺XSailboat簡介--Hadoop、Hive、Flink、DataStudio、數(shù)據(jù)服務(wù)、API網(wǎng)關(guān)、認(rèn)證中心、數(shù)據(jù)可視化、離線分析、實時計算、應(yīng)用引擎等1. 引言 從2021年年底開始，筆者帶領(lǐng)一個微型團隊開始開發(fā)我們的大數(shù)據(jù)平臺XSailboat，目前已經(jīng)初步具備實用化條件，產(chǎn)品將持續(xù)性地開發(fā)、完善、迭代升級。 在接下來的...
1. 背景 筆者的開發(fā)大數(shù)據(jù)平臺XSailboat[http://m.itdecent.cn/p/cacdcf5ec088]中包含基于Flink的可視化計算管道開發(fā)和運...
1. 背景 在開發(fā)大數(shù)據(jù)平臺XSailboat[http://m.itdecent.cn/p/cacdcf5ec088]中的查看Flink任務(wù)的狀態(tài)數(shù)據(jù)工具時，用Sta...
1. 問題 在resourcemanager.log中出現(xiàn)下面的異常： 2. 代碼分析 分析查看源代碼 類org.apache.hadoop.yarn.server.time...
1. 背景 在開發(fā)大數(shù)據(jù)平臺XSailboat[http://m.itdecent.cn/p/cacdcf5ec088]中的查看Flink任務(wù)的狀態(tài)數(shù)據(jù)工具時，用Sta...
1. 引言 筆者早年間有很長一段時間都在阿里云DataWorks上帶著團隊進行數(shù)據(jù)開發(fā)，后來因為一個契機自己搞起了大數(shù)據(jù)平臺XSailboat[https://www.jia...
1. 何為數(shù)據(jù)治理 數(shù)據(jù)治理是為了讓數(shù)據(jù)在形式上和質(zhì)量上更好地達成某一數(shù)據(jù)應(yīng)用目標(biāo)而進行的數(shù)據(jù)集成、數(shù)據(jù)整理、數(shù)據(jù)分析、數(shù)據(jù)修繕、數(shù)據(jù)發(fā)布，數(shù)據(jù)應(yīng)用的過程。 2. 為什么需要...
1. 引言 從2021年年底開始，筆者帶領(lǐng)一個微型團隊開始開發(fā)我們的大數(shù)據(jù)平臺XSailboat，目前已經(jīng)初步具備實用化條件，產(chǎn)品將持續(xù)性地開發(fā)、完善、迭代升級。 在接下來的...
5、GB/T 38673-2020 信息技術(shù) 大數(shù)據(jù) 大數(shù)據(jù)系統(tǒng)基本要求（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義，熟悉大數(shù)據(jù)系統(tǒng)框架、功能要求、非功能要求。 3. 術(shù)語和定義 GB...
1. 背景 筆者正在開發(fā)大數(shù)據(jù)平臺(XSailboat)中的指標(biāo)建模工具(SailIMS)。以此篇文檔梳理一下其中一部分關(guān)鍵性的功能設(shè)計。內(nèi)容重點不在解釋各種理論和方法，而是...
4、GB/T 38667-2020 信息技術(shù) 大數(shù)據(jù) 數(shù)據(jù)分類指南（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義，熟悉數(shù)據(jù)分類的過程，以及分類視角、分類維度和分類方法。 3. 術(shù)語和定義...
3、GB/T 37973-2019 信息安全技術(shù) 大數(shù)據(jù)安全管理指南（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義，了解大數(shù)據(jù)安全需求、大數(shù)據(jù)分類分級、大數(shù)據(jù)活動及安全要求、大數(shù)據(jù)安全風(fēng)...
2、GB/T 35589-2017 信息技術(shù) 大數(shù)據(jù)技術(shù)參考模型（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義，熟悉大數(shù)據(jù)參考架構(gòu)的目的、目標(biāo)，熟悉大數(shù)據(jù)參考架構(gòu)及其各組成部分。 1.范...
1、GB/T 35295-2017 信息技術(shù) 大數(shù)據(jù) 術(shù)語（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義，以及密切相關(guān)的通用術(shù)語。 2.1.1 大數(shù)據(jù) big data具有體量巨大、來源...
1、《促進大數(shù)據(jù)發(fā)展行動綱要》國發(fā)〔2015〕50 號（1）熟悉數(shù)據(jù)共享的范圍邊界和使用方式。 (一)加快政府?dāng)?shù)據(jù)開放共享，推動資源整合，提升治理能力。1、大力推動政府部門數(shù)...
1、《中華人民共和國民法典》中華人民共和國主席令第四十五號（1）了解隱私權(quán)和個人信息保護有關(guān)內(nèi)容。 第六章 隱私權(quán)和個人信息保護第一千零三十二條自然人享有隱私權(quán)。任何組織或者...
1. 背景 ??在筆者開發(fā)的大數(shù)據(jù)平臺(XSailboat)中，包含一個任務(wù)開發(fā)、調(diào)度、監(jiān)控的模塊，叫XTaskWorks。這里的任務(wù)是使用Java，在XTaskFrame框...
1. 環(huán)境信息 java 1.8 SpringBoot 2.4.4 SpringGateway 3.0.5 2. 配置application.properties 證書生成方...
1. keytool命令 keytool密鑰和證書管理工具 命令: -certreq 生成證書請求-changealias 更改條目的別名...
1. 應(yīng)用場景 ??通常用在以文件的形式下載大量數(shù)據(jù)。 2. 寫法舉例 3. 擴展 ??如果被下載的資源滿足以下條件，則可以先將數(shù)據(jù)寫到Temp File，然后返回TempF...