LittleMagic

前言 本文前半部分的內(nèi)容在很久之前講過，但是最近又有交接到團(tuán)隊內(nèi)的歷史任務(wù)出現(xiàn)這方面導(dǎo)致的性能問題，故有必要再講一次，并擴(kuò)展一部分新內(nèi)容。先通過兩個例子來引入Java類型擦除...

LittleMagic

前言 Elasticsearch不僅是強(qiáng)大的全文搜索引擎甫匹，在很多場景下（特別是TiDB、ShardingSphere等框架成熟之前）也被當(dāng)做分布式HTAP數(shù)據(jù)庫使用，在存儲块攒、...

LittleMagic

重操舊業(yè)。 2024年4月動畫《夜晚的水母不會游泳》第5話插曲https://y.qq.com/n/ryqq/songDetail/498420410?songtype=0[...

LittleMagic

前言 單指令流多數(shù)據(jù)流（SIMD）及其衍生出來的向量化處理技術(shù)已經(jīng)有了相當(dāng)?shù)臍v史囱井，并且也是高性能數(shù)據(jù)庫、計算引擎恕稠、多媒體庫等組件的標(biāo)配利器琅绅。筆者在兩年多前曾經(jīng)做過一次有關(guān)該主...

LittleMagic

前言 大家已經(jīng)了解，StarRocks的更新模型鹅巍、主鍵模型等在Flush和Compaction過程中會產(chǎn)生歷史版本數(shù)據(jù)千扶，這些垃圾數(shù)據(jù)需要及時被清理，以防止存儲空間浪費(fèi)骆捧。而St...

LittleMagic

前言 當(dāng)我們自建大數(shù)據(jù)集群（如OLAP集群澎羞、實時計算集群、分布式存儲集群敛苇、全文搜索集群等）的時候妆绞，除了硬件資源要合理配備外，在操作系統(tǒng)層面也要進(jìn)行一些事前配置枫攀，讓大數(shù)據(jù)組件能...

LittleMagic

前言 我們知道括饶，列式存儲的數(shù)據(jù)組織形式使得它適合海量數(shù)據(jù)在線查詢、分析的場景来涨，而寫入性能相對于讀取性能似乎并不那么重要（傳統(tǒng)的ORC / Parquet on Hive方案就...

LittleMagic

因為跨年有霓虹出游計劃图焰，所以稍微打破一下傳統(tǒng)，選在平安夜發(fā)布2023年度最佳單曲蹦掐。 今年的Top 1是來自著名Indie樂團(tuán)Mili的「Excαlibur」技羔，同時是近十年來所...

LittleMagic

前言 最近在進(jìn)行StarRocks與數(shù)據(jù)湖集成方面的一些工作（重點是SR 3.2與Paimon 0.6的適配），同時閱讀和修改了部分代碼卧抗，發(fā)現(xiàn)StarRocks JNI Co...