Hadoop的流 - 模塊依賴

Question

是否有Hadoop的流任何標準的方法來處理類似DistributedCache（在Java MR）的依賴

比方說我有一個Python模塊中的所有地圖的任務使用。我如何實現它？

Answer 1

可以使用-file參數指定Python模塊：

看到http://hadoop.apache.org/docs/r0.18.3/streaming.html

，如果你有依賴模塊和這樣你可以指定多個-file參數。