最近部門正在使用Spark做ETL，在使用JDBC作為DataSource的時(shí)候遇到了一些坑爹的問題脸爱，本文主要分享一下我遇到的問題和一些解決方案琳彩，當(dāng)然可能會有更好的解決方案，...
IP屬地：上海
-
SparkSQL讀寫jdbc一些鮮為人知的事兒
-
分布式系統(tǒng)-CAP理論CAP基本概念 CAP理論作為分布式系統(tǒng)的基石，應(yīng)該是每個(gè)入門分布式系統(tǒng)的人都應(yīng)該學(xué)習(xí)的內(nèi)容。 CAP理論是2000年7月，加州大學(xué)伯克利分校的Eric Brewer教授在A...
-
分布式系統(tǒng)簡介什么是分布式系統(tǒng) 分布式系統(tǒng)是由一組通過網(wǎng)絡(luò)進(jìn)行通信蔗候、為了完成共同的任務(wù)而協(xié)調(diào)工作的計(jì)算機(jī)節(jié)點(diǎn)組成的系統(tǒng)。分布式系統(tǒng)的出現(xiàn)是為了用廉價(jià)的埂软、普通的機(jī)器完成單個(gè)計(jì)算機(jī)無法完成的計(jì)...
-
DB2問題整理（持續(xù)更新）
字符串轉(zhuǎn)日期類型date(yyyy-mm-dd)timestamp(yyyy-mm-dd hh24:mi:ss) db2不記錄日志操作 未能在表空間中分配新頁面SQL0289...
-
elasticsearch學(xué)習(xí)筆記(二)-elasticsearch分詞器
elasticsear analyzer 什么是Analysis 顧名思義锈遥，文本分析就是把全文本轉(zhuǎn)換成一系列單詞（term/token）的過程，也叫分詞勘畔。在 ES 中迷殿，Ana...
-
elasticsearch學(xué)習(xí)筆記(一)-elasticsearch相關(guān)概念ElasticSearch elasticsearch簡介 elasticsearch是一個(gè)基于Lucene庫的分布式，支持多租戶的全文搜索引擎咖杂，也是數(shù)據(jù)分析引擎庆寺。 elas...
-
數(shù)據(jù)結(jié)構(gòu)與算法-java.util.HashMap源碼分析java.util.HashMap源碼分析 我剛開始找工作的時(shí)候，刷面試題诉字，刷到最多的懦尝，同時(shí)確實(shí)也是面試官最喜歡的考察的一個(gè)知識點(diǎn)就是什么是HashMap知纷，或者與Hashta...
-
數(shù)據(jù)結(jié)構(gòu)與算法-設(shè)計(jì)一個(gè)雙端循環(huán)隊(duì)列
什么是隊(duì)列？ 之前探討過一種先進(jìn)后出的數(shù)據(jù)結(jié)構(gòu)-棧[./%E6%A0%88.md]陵霉，那是否有先進(jìn)先出的數(shù)據(jù)結(jié)構(gòu)呢琅轧？這就是我們本篇需要討論的另外一種操作受限的數(shù)據(jù)結(jié)構(gòu)-隊(duì)列。 ...
-
數(shù)據(jù)結(jié)構(gòu)與算法-如何在編譯器語法檢查中匹配括號
什么是棧 喜歡玩羽毛球或者乒乓球的童鞋都知道踊挠，都是用羽毛球筒裝羽毛球乍桂，羽毛球筒的特點(diǎn)就是其中一端是封閉的，另一端是可以置入或者取出羽毛球的效床。棧就類似于這種球筒睹酌，特點(diǎn)也是其中一...