大佬您好蔑担，我按照您的方法生成動態(tài)類啰脚，而且在類字符串之前添加了import 工具類的相關(guān)字符串双炕，這種方法生成的動態(tài)類能在spark本地模式下正常運行缀蹄，但在集群模式下卻無法識別這部分工具類衬潦，請問能有什么辦法解決嘛师幕？這一點對我很重要孵滞，求求大佬指點下方向，感激不盡漂彤。??????
Scala - 反射動態(tài)創(chuàng)建方法有時候我們想定義一個字符串的方法雾消，然后通過scala的動態(tài)創(chuàng)建class灾搏，然后反射調(diào)用方法，在很多情景下是在學有用的立润，比較動態(tài)自定義spark的mapParations狂窑，當然...
@大豬大豬 大佬您好到旦，我這邊發(fā)現(xiàn)如果Spark任務(wù)提交至集群上運行而不是本地運行模式的話貌似沒有辦法識別UDF的import信息旨巷，比如我這邊在動態(tài)生成類之前import了java.util.SimpleDateFormat類，這時候Spark任務(wù)在local模式下可以識別這些信息并生成動態(tài)類添忘，但是如果是提交至集群上運行的話則識別不了采呐，請問您遇到過這種情況嗎？需要怎么解決搁骑。
Spark - 動態(tài)注冊UDF昨天有位大哥問小弟一個Spark問題斧吐，他們想在不停Spark程序的情況下動態(tài)更新UDF的邏輯，他一問我這個問題的時候仲器，本豬心里一驚煤率，Spark**還能這么玩?我出于程序員的本...
@大豬大豬 是的，我前兩天也測試過乏冀，可以通過在生成類之前添加import信息實現(xiàn)工具類的導入蝶糯，謝謝大佬的分享，您的這篇文章對我?guī)椭艽蟆?
Spark - 動態(tài)注冊UDF昨天有位大哥問小弟一個Spark問題辆沦，他們想在不停Spark程序的情況下動態(tài)更新UDF的邏輯昼捍，他一問我這個問題的時候，本豬心里一驚肢扯，Spark**還能這么玩?我出于程序員的本...
這種方法反射生成的動態(tài)類是否能夠import其他的包呢妒茬？反射是否能夠識別呢？就是說如果我寫一個比較復雜的UDF蔚晨，UDF需要調(diào)用其他的jar包乍钻，又是否能順利調(diào)用呢？
Spark - 動態(tài)注冊UDF昨天有位大哥問小弟一個Spark問題铭腕，他們想在不停Spark程序的情況下動態(tài)更新UDF的邏輯银择，他一問我這個問題的時候，本豬心里一驚谨履，Spark**還能這么玩?我出于程序員的本...
