大數(shù)據(jù)學(xué)習(xí)資源整理

github地址 后面繼續(xù)更新在github

utils4s包含各種scala通用泻肯、好玩的工具庫demo和使用文檔避矢,通過簡單的代碼演示和操作文檔,各種庫信手拈來。

同時歡迎大家貢獻(xiàn)各種好玩的兔簇、經(jīng)常使用的工具庫。

開源中國地址

QQ交流群 432290475

微博:jacksu_

<h2 id="id2">scala語法學(xué)習(xí)</h2>

說明:scala語法學(xué)習(xí)過程中纲酗,用例代碼都放在scala-demo模塊下霍狰。

快學(xué)scala電子書(推薦入門級書)

scala理解的比較深

scala99問題

scala初學(xué)者指南(這可不是初學(xué)者可以理解的歐,還是寫過一些程序后再看)

scala初學(xué)者指南英文版

scala學(xué)習(xí)用例

<h2 id="id21">common庫</h2>

日志操作log4s

單元測試scalatest

日期操作lama)(注:只支持日期操作砚哗,不支持時間操作)

日期時間操作nscala-time)(注:沒有每月多少天龙助,每月最后一天,以及每年多少天)

json解析json4s

resources下文件加載用例

文件操作better-files

單位換算squants

線性代數(shù)和向量計算(breeze)

分布式并行實(shí)現(xiàn)庫akka(akka)

Twitter工具庫twitter util

日常腳本工具

<h2 id="id22">BigData庫</h2>

<h3 id="id221">Spark</h3>

<h4 id="id2211">Spark core</h4>
一個不錯的spark學(xué)習(xí)互動課程

spark 設(shè)計與實(shí)現(xiàn)

<h4 id="id2212">Spark Streaming</h4>

Spark Streaming使用Kafka保證數(shù)據(jù)零丟失

spark streaming測試用例

spark streaming源碼解析

基于spark streaming的聚合分析(Sparkta)

<h4 id="id2213">Spark SQL</h4>

spark DataFrame測試用例

Hive Json加載

SparkSQL架構(gòu)設(shè)計和代碼分析

<h4 id="id2213">Spark 機(jī)器學(xué)習(xí)</h4>

spark機(jī)器學(xué)習(xí)源碼解析

KeyStoneML
KeystoneML is a software framework, written in Scala, from the UC Berkeley AMPLab designed to simplify the construction of large scale, end-to-end, machine learning pipelines with Apache Spark.

spark TS

<h4 id="id2214">Spark 其它</h4>

databricks spark知識庫

spark學(xué)習(xí)知識總結(jié)

Spark library for doing exploratory data analysis in a scalable way

圖處理(cassovary)

基于spark進(jìn)行地理位置分析(gagellan)

<h3 id="id222">ES</h3>

ES 非阻塞scala客戶端
<h2 id="id23">貢獻(xiàn)代碼步驟</h2>

  1. 首先 fork 我的項(xiàng)目
  2. 把 fork 過去的項(xiàng)目也就是你的項(xiàng)目 clone 到你的本地
  3. 運(yùn)行 git remote add jacksu git@github.com:jacksu/utils4s.git 把我的庫添加為遠(yuǎn)端庫
  4. 運(yùn)行 git pull jacksu master 拉取并合并到本地
  5. coding
  6. commit后push到自己的庫( git push origin master )
  7. 登陸Github在你首頁可以看到一個 pull request 按鈕,點(diǎn)擊它,填寫一些說明信息,然后提交即可蛛芥。
    13是初始化操作,執(zhí)行一次即可提鸟。在coding前必須執(zhí)行第4步同步我的庫(這樣避免沖突),然后執(zhí)行57既可军援。
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市称勋,隨后出現(xiàn)的幾起案子胸哥,更是在濱河造成了極大的恐慌,老刑警劉巖赡鲜,帶你破解...
    沈念sama閱讀 207,248評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件空厌,死亡現(xiàn)場離奇詭異,居然都是意外死亡银酬,警方通過查閱死者的電腦和手機(jī)蝇庭,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,681評論 2 381
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來捡硅,“玉大人,你說我怎么就攤上這事盗棵∽尘拢” “怎么了?”我有些...
    開封第一講書人閱讀 153,443評論 0 344
  • 文/不壞的土叔 我叫張陵纹因,是天一觀的道長喷屋。 經(jīng)常有香客問我,道長瞭恰,這世上最難降的妖魔是什么屯曹? 我笑而不...
    開封第一講書人閱讀 55,475評論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮惊畏,結(jié)果婚禮上恶耽,老公的妹妹穿的比我還像新娘。我一直安慰自己颜启,他們只是感情好偷俭,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,458評論 5 374
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著缰盏,像睡著了一般涌萤。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上口猜,一...
    開封第一講書人閱讀 49,185評論 1 284
  • 那天负溪,我揣著相機(jī)與錄音,去河邊找鬼济炎。 笑死川抡,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的须尚。 我是一名探鬼主播猖腕,決...
    沈念sama閱讀 38,451評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼拆祈,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了倘感?” 一聲冷哼從身側(cè)響起放坏,我...
    開封第一講書人閱讀 37,112評論 0 261
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎老玛,沒想到半個月后淤年,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,609評論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡蜡豹,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,083評論 2 325
  • 正文 我和宋清朗相戀三年麸粮,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片镜廉。...
    茶點(diǎn)故事閱讀 38,163評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡弄诲,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出娇唯,到底是詐尸還是另有隱情齐遵,我是刑警寧澤,帶...
    沈念sama閱讀 33,803評論 4 323
  • 正文 年R本政府宣布塔插,位于F島的核電站梗摇,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏想许。R本人自食惡果不足惜伶授,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,357評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望流纹。 院中可真熱鬧糜烹,春花似錦、人聲如沸漱凝。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,357評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽碉哑。三九已至挚币,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間扣典,已是汗流浹背妆毕。 一陣腳步聲響...
    開封第一講書人閱讀 31,590評論 1 261
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留贮尖,地道東北人笛粘。 一個月前我還...
    沈念sama閱讀 45,636評論 2 355
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親薪前。 傳聞我的和親對象是個殘疾皇子润努,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,925評論 2 344

推薦閱讀更多精彩內(nèi)容