發(fā)簡信
IP屬地：北京
-
轉(zhuǎn)行程序員，靠譜嗎娘锁？
程序員高薪已經(jīng)不是一個(gè)秘密了，現(xiàn)在社會(huì)上很多人談起程序員饺鹃，就自然想到莫秆，程序員的高薪。 現(xiàn)在轉(zhuǎn)行程序員要么培訓(xùn)班要么自學(xué)悔详，對(duì)于培訓(xùn)班而言镊屎，恕我直言...
-
【Spark 自定義UDF】
在sparksql中使用udf，比較簡單茄螃，先在spark中自定義udf算子函數(shù),然后進(jìn)行注冊(cè)缝驳，之后再sql中就可以直接使用該udf val le...
-
【Storm的簡介】
storm分布式實(shí)時(shí)計(jì)算框架，在整個(gè)程序中归苍，spout接收數(shù)據(jù)源并封裝數(shù)據(jù)為tuple用狱，然后將tuple發(fā)送給bolt處理，處理完數(shù)據(jù)后可以發(fā)送...
-
【Mysql 優(yōu)化】
當(dāng)需要從大量數(shù)據(jù)中進(jìn)行查詢操作拼弃，我們可以使用建索引的方式夏伊，但是在使用索引上，需要注意吻氧，否則查詢的時(shí)候會(huì)造成放棄索引使用全盤掃描方式 索引失效的原...
-
【Flume簡介】
1 介紹 flume是實(shí)時(shí)日志采集系統(tǒng)溺忧， 使用場景：監(jiān)控目錄的日志信息，控制臺(tái)輸入信息盯孙，端口信息鲁森，http發(fā)送的信息，并將該信息發(fā)送到指定的存儲(chǔ)...
-
【Java 多線程之ReadWriteLock 讀寫鎖振惰，偏向鎖歌溉，自旋鎖分析】前言 ReadWriteLock是一個(gè)抽象類，實(shí)現(xiàn)類為ReentrantReadWriteLock骑晶，其管理兩組鎖痛垛，一個(gè)讀鎖，一個(gè)寫鎖透罢。讀鎖可以在...
-
【MySql常用的存儲(chǔ)引擎】
前言 mysql中的存儲(chǔ)引擎比較多榜晦，但是常用的也就兩個(gè)InnoDB和MyISAM InnoDB 支持事務(wù)（提交冠蒋、回滾）羽圃，行級(jí)鎖（對(duì)索引的行級(jí)鎖，...
-
【SparkSQL詳解】
簡單介紹 sparksql是spark的一個(gè)重要的組件，該組件主要是處理結(jié)構(gòu)化的數(shù)據(jù)朽寞，從外部數(shù)據(jù)源（hive,json,.csv,parque...
-
【Rdd/DataFrame/DataSet區(qū)別和聯(lián)系】
DataFrame: DataFrame是以rdd為基礎(chǔ)的分布式數(shù)據(jù)集识窿，類似于傳統(tǒng)數(shù)據(jù)庫的二維表格，帶有schema的元數(shù)據(jù)脑融，即相當(dāng)于二維表格的...