一個95%時間都在入門和魔改的菜??
發(fā)簡信
IP屬地：內蒙古
-
Stable Diffusion工作原理（How does Stable Diffusion work?中文版）翻譯自How does Stable Diffusion work?[https://stable-diffusion-art.com/how-stable-diffusio...
-
Spark小文件異步合并工具類
簡介 由于Spark應用寫數據到Hive表時，容易因為shuffle數過多導致生成過多小文件跳纳，影響集群存儲利用率忍饰；故需要一個能避免讀寫沖突的小文件合并工具。 工具類 調用 T...
-
Structured Streaming自定義MySQLSink-威力增強版
之前使用過foreach單條處理的MySQLSink寺庄，可能導致連續(xù)開關連接艾蓝，性能較差，故通過prepareStatement的addBatch批量處理數據斗塘。 這樣在proce...
-
確認下是:gflagfile 的 Master 高級配置代碼段（安全閥）赢织，他這里面叫安全閥的配置挺多的容易弄混，我一開始也弄混了馍盟，確認之后是沒這個問題了
Spark讀Kudu時報認證問題
報錯:WARN TaskSetManager: Lost task 3.0 in stage 17.0 (TID 2071, node135.bcwcluster.com, ...
-
-
Spark 內存管理的前世今生（下）歡迎關注我的微信公眾號：FunnyBigData 在《Spark 內存管理的前世今生（上）》中酵紫，我們介紹了 UnifiedMemoryManager 是如何管理內存的告嘲。然而，...
-
<<RxJava 2.x 實戰(zhàn)>>、<<Kotlin 進階實戰(zhàn)>> 作者<br><br>掘金小冊<<Android 進階：基于 Kotlin 的 Android App 開發(fā)實踐>>作者<br><br>微信公眾號: Java與Android技術棧<br><br>關注領域：Java/Kotlin 服務端参歹、桌面端 仰楚、Android 、 機器學習犬庇、端側智能<br>
-
Spark 應用監(jiān)控告警和自動重啟
Spark on yarn 執(zhí)行流計算時僧界，如果流掛了，沒有提醒會導致實時指標計算停滯械筛，為了保證流的7/24運行捎泻，需要有一個能監(jiān)控Spark on yarn上的應用，實現失敗重...
