技術(shù)是一步又一步的升級飞蹂，以前我們學(xué)習(xí)計(jì)算機(jī)拉队，沒有必要去學(xué)習(xí)打孔機(jī)是怎么一回事，晶體二極管是怎么一回事懦鼠。未來的計(jì)算機(jī)科學(xué)，基礎(chǔ)也會進(jìn)行升級屹堰，可能Linux還是會學(xué)習(xí)一下肛冶，但是不是最底層的了。最后一個問題思考留給作者：人類利用技術(shù)改造環(huán)境扯键，塑造更美好的生活睦袖，技術(shù)是否也在驅(qū)動人類完成其使命，也就是說像凱文·凱利說的荣刑，技術(shù)是第七種生命形態(tài)馅笙？
看不到服務(wù)器的年代，一個新的時代冬瓜厉亏，把程序提交到集群上去哈 冬瓜的日記 冬瓜是一家互聯(lián)網(wǎng)公司的程序員董习。他來公司幾個月，已經(jīng)做了好幾個項(xiàng)目了爱只。程序開發(fā)測試完阱飘，他要做的就是通過一個命令，把程序提交到集群上就完...
劃分stage源碼剖析 本文基于Spark 1.3.1 先上一些stage相關(guān)的知識點(diǎn)： DAGScheduler將Job分解成具有前后依賴關(guān)系的多個stage DAGSch...
文章寫得非常好对蒲。反正看完，對Stage的劃分非常清晰了贡翘。源碼級別的清晰蹈矮。多謝。
[Spark源碼剖析] DAGScheduler劃分stage劃分stage源碼剖析 本文基于Spark 1.3.1 先上一些stage相關(guān)的知識點(diǎn)： DAGScheduler將Job分解成具有前后依賴關(guān)系的多個stage DAGSch...
哈哈鸣驱，硬件有問題都能搞死人泛鸟。
查找問題的方法反思最近這段時間一直在折騰Spark，組內(nèi)希望以Spark全面代替Hive踊东，由我主導(dǎo)這件事北滥。年前的時候，已經(jīng)部署并配置好Spark集群闸翅，測試發(fā)現(xiàn)相對于Hive的速度提升非常明顯再芋。...
一：概述 1.1 ResourceManager基本職能 ResourceManager需通過兩個RPC協(xié)議與NodeManager和ApplicationMaster交互，...
不錯缎脾，加油祝闻！1024
ResourceManager剖析一：概述 1.1 ResourceManager基本職能 ResourceManager需通過兩個RPC協(xié)議與NodeManager和ApplicationMaster交互，...
