大數(shù)據(jù)精進(jìn)之路 - 專題

投稿

收錄了46篇文章 · 11人關(guān)注

如何選擇SparkSQL中的Join策略
在大數(shù)據(jù)分析中嫉你，將兩個數(shù)據(jù)集進(jìn)行 Join 操作是很常見的場景。在 Spark 的物理計劃階段，Spark 的 Join Selection 類...

0.8 wenay 0 4
jvm 性能調(diào)優(yōu)工具之 jmap
概述命令jmap是一個多功能的命令霎奢。它可以生成 java 程序的 dump 文件，也可以查看堆內(nèi)對象示例的統(tǒng)計信息饼灿、查看 ClassLoad...

4.0 jijs 2 48

使用docker運(yùn)行mysql實(shí)例
希望在自己的機(jī)器模擬一下公司中微服務(wù)的構(gòu)建幕侠，使用docker部署了mysql實(shí)例，使用spring boot進(jìn)行了CRUD（增刪改查）操作進(jìn)行了...

0.5 孫成龍 10 35 2
一起讀Paper
最近抽風(fēng)碍彭，沒事會在知乎上回答一些問題晤硕，也許是想在這個世界上多留下點(diǎn)痕跡吧 :) 幾次看到類似這樣的題目：作為一個程序員，如何提高自己? 我經(jīng)常...

0.7 xumingmingv 1 7
阿里美團(tuán)java面試必問：Full GC頻繁庇忌，CPU 100%等線上問題如何排查
系統(tǒng)運(yùn)行緩慢舞箍，CPU 100%，以及Full GC次數(shù)過多問題的排查思路 1. Full GC次數(shù)過多 2. CPU過高 3. 不定期出現(xiàn)的接口...

3.3 名猿 0 27
flume1.9源碼分析（二）source皆疹、sink疏橄、channel
1.啟動 1.1 啟動總?cè)肟?從上節(jié)flume1.9源碼分析（一）從編譯到啟動中可知，flume的啟動方式分為兩種：（1）自動監(jiān)聽配置文件變化...

CarsonCao 0 0
Murmur哈希算法
說到哈希算法，可能大部分人都會不自覺得想到 md 和 sha 系列捎迫，在這之前晃酒，我就是這樣的，因?yàn)樗麄円馕吨餍邪踩头€(wěn)定窄绒。但是贝次，最近我知道了一款...

0.3 CarsonCao 0 2

CAS樂觀鎖原理
1. 樂觀鎖和悲觀鎖悲觀鎖總是假設(shè)最壞的情況，為防止每次去拿數(shù)據(jù)別人修改彰导，每次在拿數(shù)據(jù)的時候都會上鎖蛔翅，這樣別人想拿這個數(shù)據(jù)就會阻塞直到它拿到...

CarsonCao 0 0
Java：CAS(樂觀鎖)
本文講解CAS機(jī)制，主要是因?yàn)樽罱鼫?zhǔn)備面試題位谋，發(fā)現(xiàn)這個問題在面試中出現(xiàn)的頻率非常的高山析，因此把自己學(xué)習(xí)過程中的一些理解記錄下來，希望能對大家也有幫...

10.4 AubreyXue 16 176
解決spark streaming日志不斷增長問題
spark streaming在yarn-client或者本地local執(zhí)行的時候倔幼，由于長時間運(yùn)行日志會越來越多盖腿，查看起來很不方便，可以利用lo...

CarsonCao 0 0