vim /etc/sudoers 添加sudo權(quán)限 adduser 添加用戶passwd 修改密碼 sudo vim /etc/sysconfig/network 修改名...
發(fā)簡(jiǎn)信
IP屬地：北京
-
VMware安裝
-
Hbase原理系統(tǒng)架構(gòu)圖 從HBase的架構(gòu)圖上可以看出尤筐，HBase中的組件包括Client、Zookeeper掏击、HMaster、HRegionServer秩铆、HRegion砚亭、Store、M...
-
hive數(shù)據(jù)傾斜原因解決方法
Hive傾斜之group by聚合傾斜 原因： 分組的維度過(guò)少殴玛，每個(gè)維度的值過(guò)多捅膘，導(dǎo)致處理某值的reduce耗時(shí)很久； 對(duì)一些類型統(tǒng)計(jì)的時(shí)候某種類型的數(shù)據(jù)量特別多滚粟，其他的數(shù)據(jù)...
-
spark廣播變量累加器背景 在spark程序中寻仗，當(dāng)一個(gè)傳遞給Spark操作(例如map和reduce)的函數(shù)在遠(yuǎn)程節(jié)點(diǎn)上面運(yùn)行時(shí)，Spark操作實(shí)際上操作的是這個(gè)函數(shù)所用變量的一個(gè)獨(dú)立副本凡壤。這些變...
-
spark開發(fā)調(diào)優(yōu)1. 避免重復(fù)創(chuàng)建RDD 通常來(lái)說(shuō)署尤，我們?cè)陂_發(fā)一個(gè)Spark作業(yè)時(shí)，首先是基于某個(gè)數(shù)據(jù)源（比如Hive表或HDFS文件）創(chuàng)建一個(gè)初始的RDD亚侠；接著對(duì)這個(gè)RDD執(zhí)行某個(gè)算子操作...
-
RDD與算子什么是RDD RDD（Resilient Distributed Dataset）叫做彈性分布式數(shù)據(jù)集曹体，是Spark中最基本的數(shù)據(jù)抽象，它代表一個(gè)不可變硝烂、可分區(qū)箕别、里面的元素可...
-
spark運(yùn)行流程spark中基本概念 Application：表示你的應(yīng)用程序 Driver：表示main()函數(shù)，創(chuàng)建SparkContext钢坦。由SparkContext負(fù)責(zé)與Cluste...
-
Chrome擴(kuò)展程序1.準(zhǔn)備應(yīng)用https://share.weiyun.com/5beYAw4密碼:nFO82.將下載的zip解壓,在瀏覽器中找到更多工具,擴(kuò)展程序
-
-
ListState
process內(nèi)使用KeyedProcessFunctionliststate可以設(shè)置檢查點(diǎn)當(dāng)程序在某時(shí)刻停止再啟動(dòng)會(huì)繼續(xù)(記錄偏移量)
-
說(shuō)電影一般都人究孕，應(yīng)該是那種沒有體會(huì)或者深思過(guò)整個(gè)社會(huì)體系的人吧
豆瓣9.2分，今年最牛逼的電影爹凹，沒白等厨诸！
最近這部電影很火，前幾天公眾號(hào)推薦過(guò)一次禾酱，但是后臺(tái)仍一堆人求這部電影微酬，今天再推薦一遍绘趋。里面一些鏡頭讓我一個(gè)大男人看的都熱淚盈眶，很值得一看颗管！ 9月初陷遮，DC漫改電影《小丑》，在...
-
不公平處處都要 沒有絕對(duì)的差異之分 正義再光亮也有照不到的黑暗之處
北大女生包麗之死——姑娘垦江，若他真愛你帽馋，怎舍得傷你?
這世界對(duì)女性太不公平了！太不太不公平了比吭！ 01. 男：“你為我懷一個(gè)孩子绽族，然后去打掉●锰伲” 男：“你去做絕育手術(shù)吧慢。” 男：“我們來(lái)復(fù)習(xí)一下赏表，在別人面前要叫我什么检诗？” 女：“主人...
-
Hbase偽分布
1.將hbase通過(guò)Xftp傳入Red-Hat 2.tar -zxvf hbase -C /usr/local (解壓到目錄下) 3.cd /usr/local/hbase/...
-
Hbase
創(chuàng)建名稱空間 create_name ‘名稱’ 展示名稱空間 list_namespace 列出名稱空間的所有表 list_namespace_tables ‘hbase’ ...
-
Watermarks
源碼刨析 :設(shè)置水印時(shí)間防止數(shù)據(jù)亂序 模擬Watermarks : 輸入數(shù)據(jù)0001,15383598820000001,15383598860000001,15383598...