如何將我自己的罐子紗客戶

Question

我運行火花帶：

./bin/spark-shell --master yarn-client 

我想包括一個Jar定義類，這樣我可以導入和使用這些類和方法從火花殼階>

Answer 1

可以使用

./bin/spark-shell --master yarn-client --jars /path/to/myjar.jar 

或

spark.executor.extraClassPath=/path/to/myjar.jar 
spark.driver.extraClassPath=/path/to/myjar.jar 

或簡單地將它們添加到HADOOP_CLASSPATH