發(fā)簡信
IP屬地：廣東
-
where 1=1 是什么意思嚼蚀？禁灼？？
where 1=1 先來看一段代碼 上面的代碼很熟悉驰坊，就是查詢符合條件的總條數(shù)匾二。在mybatis中常用到if標(biāo)簽判斷where子句后的條件，為防...
-
Hive參數(shù)與性能企業(yè)級(jí)調(diào)優(yōu)（建議收藏）
Hive作為大數(shù)據(jù)平臺(tái)舉足輕重的框架拳芙，以其穩(wěn)定性和簡單易用性也成為當(dāng)前構(gòu)建企業(yè)級(jí)數(shù)據(jù)倉庫時(shí)使用最多的框架之一察藐。 但是如果我們只局限于會(huì)使用Hiv...
-
千萬級(jí)數(shù)據(jù)查詢：CK、ES舟扎、RediSearch怎么選?目錄 前言 初版設(shè)計(jì)方案 CK 分頁查詢 使用ES Scroll Scan 優(yōu)化深翻頁 ES+Hbase 組合查詢方案 RediSearch+R...
-
如何解決Elasticsearch的深度翻頁問題
使用ES做搜索引擎拉取數(shù)據(jù)的時(shí)候分飞，如果數(shù)據(jù)量太大，通過傳統(tǒng)的from + size的方式并不能獲取所有的數(shù)據(jù)（默認(rèn)最大記錄數(shù)10000）睹限，因?yàn)殡S...
-
一次SQL查詢優(yōu)化原理分析：900W+數(shù)據(jù)譬猫，從17s到300ms（減少回表查詢）有一張財(cái)務(wù)流水表，未分庫分表羡疗，目前的數(shù)據(jù)量為9555695染服，分頁查詢使用到了limit，優(yōu)化之前的查詢耗時(shí)16 s 938 ms (execut...
-
7000字叨恨，詳解倉湖一體架構(gòu)柳刮！一、 什么是數(shù)據(jù)倉庫、數(shù)據(jù)集市和數(shù)據(jù)湖秉颗？ 1痢毒、數(shù)據(jù)倉庫 早期系統(tǒng)采用數(shù)據(jù)庫來存放管理數(shù)據(jù)，但是隨著大數(shù)據(jù)技術(shù)的興起蚕甥，大家想要通過大數(shù)據(jù)技術(shù)來找...
-
Kafka 萬億級(jí)消息實(shí)踐之資源組流量掉零故障排查分析一哪替、Kafka 集群部署架構(gòu) 為了讓讀者能與小編在后續(xù)的問題分析中有更好的共鳴，小編先與各位讀者朋友對(duì)齊一下我們 Kafka 集群的部署架構(gòu)及服...
-
數(shù)據(jù)狂歡-解析數(shù)據(jù)集市|學(xué)習(xí)筆記一菇怀、怎么正確理解數(shù)據(jù)集市 舉個(gè)例子： 數(shù)據(jù)集市就像宜家樓上的展廳凭舶，這是一個(gè)面向最終用戶的數(shù)據(jù)市場(chǎng)，在這里敏释，數(shù)據(jù)（家具）以一種更加容易被業(yè)務(wù)人員接...
-
Flink重點(diǎn)難點(diǎn)：維表關(guān)聯(lián)理論和Join實(shí)戰(zhàn)Flink 案例實(shí)戰(zhàn)演練 Flink維表Join實(shí)踐 常見的維表Join方式有四種： 預(yù)加載維表 熱存儲(chǔ)維表 廣播維表 Temporal tab...