最近學習了spark 相關(guān)的內(nèi)容,寫個筆記記錄一下自己目前對于spark的理解,方便以后查閱。在本文的寫作過程中,主要參考了1.寬依賴與窄依賴的區(qū)別;2.spark中幾個概念...
![240](https://cdn2.jianshu.io/assets/default_avatar/3-9a2bcc21a5d89e21dafc73b39dc5f582.jpg?imageMogr2/auto-orient/strip|imageView2/1/w/240/h/240)
IP屬地:上海
最近學習了spark 相關(guān)的內(nèi)容,寫個筆記記錄一下自己目前對于spark的理解,方便以后查閱。在本文的寫作過程中,主要參考了1.寬依賴與窄依賴的區(qū)別;2.spark中幾個概念...
spark 2.X開始,三者的關(guān)系發(fā)生了變化,可以參考《且談Apache Spark的API三劍客:RDD竖席、DataFrame和Dataset》 ,在2.X中DataFram...