PigLatin - 從關係中刪除元組/字段

Question

這是我在StackOverflow上的第一篇文章，如果這太冗長和/或模糊，請提前請原諒。

我有一個豬的關係如下：

my_relation = LOAD '/path/to/data' USING PigStorage(',') 
       AS (f1:chararray, f2:chararray, f3:chararray); 

現在，我想篩選出從上面的關係「my_relation」領域「F3」。我知道我能做到這一點，像這樣：

my_new_relation = FOREACH my_relation GENERATE my_relation.f1, my_relation.f2; 

這種方法的問題是當我在「my_relation」關係的大量的字段/元組。說，我的相關有900個字段/元組，我希望他們都是一個。現在，用上面的方法，我不得不在我的'GENERATE'關鍵字後列出899個字段/元組！

我的問題：是否有一種簡單的方法可以從PigLatin中的關係中過濾掉一些字段/元組？

上一篇：我之前關於Apache Pig和PigLatin一般都很弱（這個問題很難說）。我仍然閱讀Pig文檔here。

感謝您閱讀這個問題！任何/所有的幫助表示讚賞！

Answer 1

首先，你的語法不太對。如果你想只保存領域f1和f2，你會做這樣的：

my_new_relation = FOREACH my_relation GENERATE f1, f2; 

至於你的問題，你可以使用一個project-range expression：

my_new_relation = FOREACH my_relation GENERATE f1 .. f345, f347 .. f900; 

Answer 2

你也可以寫你自己加載器，您可以指定要加載的所有列。