2015-12-02 73 views
1

我在豬腳本中有2個負載語句,如下所示:按順序或平行加載豬腳本中的操作?

a = load'file1.dat'using HCatLoader();

b =使用HcatLoader()加載'file2.dat';

之後,我對a和b分別進行了一些轉換。如果我們以批處理模式運行這個豬腳本,兩個文件的加載和轉換是按順序還是並行進行?我在想豬會優化這個腳本並且同時運行兩個負載。但不是100%確定。任何人都可以評論這個嗎?

回答

0

每個加載命令將並行運行,但pig腳本中的命令將運行串行。

+0

聲明不清楚。你可以請添加更多的細節。如果pig script中的命令運行串行,那麼load命令將如何並行運行? – HarishKotha