大數(shù)據(jù)平臺技術(shù)筆記 - 專題

投稿

大數(shù)據(jù)平臺技術(shù)筆記

收錄了38篇文章 · 1人關(guān)注

Flink日志采集本橙、集中存儲固该、可視化查詢實踐
1. 背景筆者的開發(fā)大數(shù)據(jù)平臺XSailboat[http://www.reibang.com/p/cacdcf5ec088]中包含基于Fl...

OkGogogooo 0 0
本地運行Flink退出時java.nio.file.DirectoryNotEmptyException解決方法
1. 背景在開發(fā)大數(shù)據(jù)平臺XSailboat[http://www.reibang.com/p/cacdcf5ec088]中的查看Flink...

OkGogogooo 0 0

Hadoop YARN的ResourceManager報錯TableNotFoundException：prod.timelineservice.flowactivity解決
1. 問題在resourcemanager.log中出現(xiàn)下面的異常： 2. 代碼分析分析查看源代碼類org.apache.hadoop.y...

OkGogogooo 0 0
Flink連接HDFS出現(xiàn)java.net.UnknownHostException解決辦法
1. 背景在開發(fā)大數(shù)據(jù)平臺XSailboat[http://www.reibang.com/p/cacdcf5ec088]中的查看Flink...

OkGogogooo 0 0
Flink的DAG可視化開發(fā)實踐
1. 引言筆者早年間有很長一段時間都在阿里云DataWorks上帶著團隊進行數(shù)據(jù)開發(fā)锅减，后來因為一個契機自己搞起了大數(shù)據(jù)平臺XSailboat[...

0.1 OkGogogooo 0 1
數(shù)據(jù)治理平臺思路
1. 何為數(shù)據(jù)治理數(shù)據(jù)治理是為了讓數(shù)據(jù)在形式上和質(zhì)量上更好地達成某一數(shù)據(jù)應(yīng)用目標而進行的數(shù)據(jù)集成、數(shù)據(jù)整理伐坏、數(shù)據(jù)分析怔匣、數(shù)據(jù)修繕、數(shù)據(jù)發(fā)布桦沉，數(shù)據(jù)...

OkGogogooo 0 0
一站式大數(shù)據(jù)平臺XSailboat簡介--Hadoop每瞒、Hive、Flink纯露、DataStudio剿骨、數(shù)據(jù)服務(wù)、API網(wǎng)關(guān)埠褪、認證中心浓利、數(shù)據(jù)可視化、離線分析钞速、實時計算贷掖、應(yīng)用引擎等
1. 引言從2021年年底開始，筆者帶領(lǐng)一個微型團隊開始開發(fā)我們的大數(shù)據(jù)平臺XSailboat渴语，目前已經(jīng)初步具備實用化條件羽资，產(chǎn)品將持續(xù)性地開發(fā)...

OkGogogooo 3 1

7. 相關(guān)標準(五)-大數(shù)據(jù)系統(tǒng)基本要求
5、GB/T 38673-2020 信息技術(shù) 大數(shù)據(jù) 大數(shù)據(jù)系統(tǒng)基本要求（1）了解本標準的范圍遵班、術(shù)語和定義屠升，熟悉大數(shù)據(jù)系統(tǒng)框架潮改、功能要求、非功能...

OkGogogooo 0 0
指標建模
1. 背景筆者正在開發(fā)大數(shù)據(jù)平臺(XSailboat)中的指標建模工具(SailIMS)腹暖。以此篇文檔梳理一下其中一部分關(guān)鍵性的功能設(shè)計汇在。內(nèi)容重...

0.2 OkGogogooo 0 1
6. 相關(guān)標準(四)-數(shù)據(jù)分類指南
4、GB/T 38667-2020 信息技術(shù) 大數(shù)據(jù) 數(shù)據(jù)分類指南（1）了解本標準的范圍脏答、術(shù)語和定義糕殉，熟悉數(shù)據(jù)分類的過程，以及分類視角殖告、分類維度...

OkGogogooo 0 0