最近學習了spark 相關(guān)的內(nèi)容,寫個筆記記錄一下自己目前對于spark的理解,方便以后查閱。在本文的寫作過程中,主要參考了1.寬依賴與窄依賴的區(qū)別;2.spark中幾個概念...
IP屬地:上海
最近學習了spark 相關(guān)的內(nèi)容,寫個筆記記錄一下自己目前對于spark的理解,方便以后查閱。在本文的寫作過程中,主要參考了1.寬依賴與窄依賴的區(qū)別;2.spark中幾個概念...
spark 2.X開始,三者的關(guān)系發(fā)生了變化,可以參考《且談Apache Spark的API三劍客:RDD竖席、DataFrame和Dataset》 ,在2.X中DataFram...