240 發(fā)簡信
IP屬地:湖南
  • linux文件系統(tǒng)中預(yù)讀

    1 預(yù)讀需求的產(chǎn)生 磁盤的機(jī)械臂+旋轉(zhuǎn)盤片的數(shù)據(jù)定位與讀取方式袄膏,決定了它最突出的性能特點(diǎn):擅長順序讀寫超凳,不善于隨機(jī)I/O茫多,I/O延遲非常大埠巨。由此而產(chǎn)生了兩個(gè)方面的預(yù)讀需求睁冬。 ...

  • IO和超市

    別人一個(gè)不錯的例子(I/O 系統(tǒng)vs超市排隊(duì))舉一個(gè)例子黍聂,我們在超市排隊(duì) checkout 時(shí)躺苦,怎么決定該去哪個(gè)交款臺呢? 首當(dāng)是看排的隊(duì)人數(shù),5個(gè)人總比20人要快吧?除了數(shù)...

  • linux命令之iostat

    1命令介紹 # iostat -x 1 10 Linux 2.6.18-92.el5xen 03/01/2010 avg-cpu: %user %nice %system %...

  • 120
    spark源碼分析之Checkpoint的過程

    概述 checkpoint 的機(jī)制保證了需要訪問重復(fù)數(shù)據(jù)的應(yīng)用 Spark 的DAG執(zhí)行行圖可能很龐大分冈,task 中計(jì)算鏈可能會很長圾另,這時(shí)如果 task 中途運(yùn)行出錯,那么 ...

  • 2persist和cache方法

    一雕沉、出現(xiàn)的異常錯誤 ExecutorLostFailure (executor 6 exited caused by one of the running tasks) Re...

  • 1sparksql優(yōu)化之coalesce

    一集乔、coalesce算址的使用 使用coalesce算子,可以手動減少DataFrame的partition數(shù)量坡椒,并且不用觸發(fā)shuffle,這也是coalesce跟repa...

  • 平衡的力量

    平衡扰路,以前還沒特別明白平衡的作用,只知道干活兒要努力拼倔叼,碰到壓力要自己扛汗唱,看了很多的偏執(zhí)才能成功,事實(shí)真是如此嗎丈攒?房地產(chǎn)的瘋狂讓多少人看到了光鮮的一面哩罪,而他的背后不知道隱藏著...

  • 多線程的優(yōu)點(diǎn)

    原文:http://tutorials.jenkov.com/java-concurrency/benefits.html 作者:Jakob Jenkov 翻譯:古圣昌...

  • 120
    spark源碼分析Master與Worker啟動流程篇

    spark通信流程 概述spark作為一套高效的分布式運(yùn)算框架授霸,但是想要更深入的學(xué)習(xí)它,就要通過分析spark的源碼际插,不但可以更好的幫助理解spark的工作過程碘耳,還可以提高對...

  • 什么是線程安全?

    在網(wǎng)上搜到很多關(guān)于什么是線程安全的概念框弛,找到的一般都是類似于下面的概念:“如果一個(gè)對象可以完全地被多個(gè)線程同時(shí)使用辛辨,那它就是線程安全的”,這樣的定義不能說不正確瑟枫,可是我...

亚洲A日韩AV无卡,小受高潮白浆痉挛av免费观看,成人AV无码久久久久不卡网站,国产AV日韩精品