@誓言vip 開源出來的東西得有資源快速迭代询件，我們正在積蓄力量
一站式大數(shù)據(jù)平臺XSailboat簡介--Hadoop桑阶、Hive、Flink港华、DataStudio道川、數(shù)據(jù)服務(wù)、API網(wǎng)關(guān)、認(rèn)證中心冒萄、數(shù)據(jù)可視化臊岸、離線分析、實時計算宦言、應(yīng)用引擎等1. 引言 從2021年年底開始扇单，筆者帶領(lǐng)一個微型團(tuán)隊開始開發(fā)我們的大數(shù)據(jù)平臺XSailboat，目前已經(jīng)初步具備實用化條件奠旺，產(chǎn)品將持續(xù)性地開發(fā)蜘澜、完善、迭代升級响疚。 在接下來的...
1. 背景 筆者的開發(fā)大數(shù)據(jù)平臺XSailboat[http://www.reibang.com/p/cacdcf5ec088]中包含基于Flink的可視化計算管道開發(fā)和運...
1. 背景 在開發(fā)大數(shù)據(jù)平臺XSailboat[http://www.reibang.com/p/cacdcf5ec088]中的查看Flink任務(wù)的狀態(tài)數(shù)據(jù)工具時忿晕，用Sta...
1. 問題 在resourcemanager.log中出現(xiàn)下面的異常： 2. 代碼分析 分析查看源代碼 類org.apache.hadoop.yarn.server.time...
1. 背景 在開發(fā)大數(shù)據(jù)平臺XSailboat[http://www.reibang.com/p/cacdcf5ec088]中的查看Flink任務(wù)的狀態(tài)數(shù)據(jù)工具時装诡，用Sta...
1. 引言 筆者早年間有很長一段時間都在阿里云DataWorks上帶著團(tuán)隊進(jìn)行數(shù)據(jù)開發(fā)，后來因為一個契機自己搞起了大數(shù)據(jù)平臺XSailboat[https://www.jia...
1. 何為數(shù)據(jù)治理 數(shù)據(jù)治理是為了讓數(shù)據(jù)在形式上和質(zhì)量上更好地達(dá)成某一數(shù)據(jù)應(yīng)用目標(biāo)而進(jìn)行的數(shù)據(jù)集成践盼、數(shù)據(jù)整理鸦采、數(shù)據(jù)分析、數(shù)據(jù)修繕咕幻、數(shù)據(jù)發(fā)布渔伯，數(shù)據(jù)應(yīng)用的過程。 2. 為什么需要...
1. 引言 從2021年年底開始狐粱，筆者帶領(lǐng)一個微型團(tuán)隊開始開發(fā)我們的大數(shù)據(jù)平臺XSailboat，目前已經(jīng)初步具備實用化條件胆数，產(chǎn)品將持續(xù)性地開發(fā)、完善互墓、迭代升級必尼。 在接下來的...
5、GB/T 38673-2020 信息技術(shù) 大數(shù)據(jù) 大數(shù)據(jù)系統(tǒng)基本要求（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義判莉，熟悉大數(shù)據(jù)系統(tǒng)框架豆挽、功能要求、非功能要求券盅。 3. 術(shù)語和定義 GB...
1. 背景 筆者正在開發(fā)大數(shù)據(jù)平臺(XSailboat)中的指標(biāo)建模工具(SailIMS)帮哈。以此篇文檔梳理一下其中一部分關(guān)鍵性的功能設(shè)計。內(nèi)容重點不在解釋各種理論和方法锰镀，而是...
4娘侍、GB/T 38667-2020 信息技術(shù) 大數(shù)據(jù) 數(shù)據(jù)分類指南（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義泳炉，熟悉數(shù)據(jù)分類的過程憾筏，以及分類視角、分類維度和分類方法花鹅。 3. 術(shù)語和定義...
3氧腰、GB/T 37973-2019 信息安全技術(shù) 大數(shù)據(jù)安全管理指南（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義刨肃，了解大數(shù)據(jù)安全需求古拴、大數(shù)據(jù)分類分級、大數(shù)據(jù)活動及安全要求真友、大數(shù)據(jù)安全風(fēng)...
2黄痪、GB/T 35589-2017 信息技術(shù) 大數(shù)據(jù)技術(shù)參考模型（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義锻狗，熟悉大數(shù)據(jù)參考架構(gòu)的目的满力、目標(biāo)，熟悉大數(shù)據(jù)參考架構(gòu)及其各組成部分轻纪。 1.范...
1油额、GB/T 35295-2017 信息技術(shù) 大數(shù)據(jù) 術(shù)語（1）了解本標(biāo)準(zhǔn)的范圍、術(shù)語和定義刻帚，以及密切相關(guān)的通用術(shù)語潦嘶。 2.1.1 大數(shù)據(jù) big data具有體量巨大、來源...
1崇众、《促進(jìn)大數(shù)據(jù)發(fā)展行動綱要》國發(fā)〔2015〕50 號（1）熟悉數(shù)據(jù)共享的范圍邊界和使用方式掂僵。 (一)加快政府?dāng)?shù)據(jù)開放共享，推動資源整合顷歌，提升治理能力锰蓬。1、大力推動政府部門數(shù)...
1眯漩、《中華人民共和國民法典》中華人民共和國主席令第四十五號（1）了解隱私權(quán)和個人信息保護(hù)有關(guān)內(nèi)容芹扭。 第六章 隱私權(quán)和個人信息保護(hù)第一千零三十二條自然人享有隱私權(quán)麻顶。任何組織或者...
1. 背景 ??在筆者開發(fā)的大數(shù)據(jù)平臺(XSailboat)中，包含一個任務(wù)開發(fā)舱卡、調(diào)度辅肾、監(jiān)控的模塊，叫XTaskWorks轮锥。這里的任務(wù)是使用Java矫钓，在XTaskFrame框...
1. 環(huán)境信息 java 1.8 SpringBoot 2.4.4 SpringGateway 3.0.5 2. 配置application.properties 證書生成方...
1. keytool命令 keytool密鑰和證書管理工具 命令: -certreq 生成證書請求-changealias 更改條目的別名...
1. 應(yīng)用場景 ??通常用在以文件的形式下載大量數(shù)據(jù)。 2. 寫法舉例 3. 擴(kuò)展 ??如果被下載的資源滿足以下條件舍杜，則可以先將數(shù)據(jù)寫到Temp File新娜，然后返回TempF...