Q

Hive生成的MapReduce代碼

2013-01-22 66 views 3 likes

3

Apache HiveQL在哪裏存儲它生成的Map/Reduce代碼？Hive生成的MapReduce代碼

2013-01-22 user1653240

+1

重複的問題，請參見：http://stackoverflow.com/questions/14191762/mr-code-from-hive或http://stackoverflow.com/a/9083923/1050422 –

A

回答

6

我相信Hive並不真正生成Map/Reduce代碼，因爲它可以從Java獲得，因爲它由Hive查詢規劃器解釋。

如果您想了解您的Hive查詢生成的操作類型，可以使用EXPLAIN作爲查詢的前綴，您將看到抽象語法樹，依賴關係圖和每個階段的計劃。有關EXPLAINhere的更多信息。

如果你真的想看到一些Map/Reduce作業，你可以試試YSmart這將把你的HiveQL語句翻譯成工作Java Map/Reduce代碼。我沒有親自使用過它，但我認識那些擁有並且說出好話的人。

2013-01-22 18:29:25

+0

FYI .. ..同樣PIG也支持[EXPLAIN]（http://pig.apache.org/docs/r0.7.0/piglatin_ref2.html#EXPLAIN）。 –

-1

似乎Hive在每次執行查詢時都會更改此方法。

http://hive.apache.org/docs/r0.9.0/api/org/apache/hadoop/hive/ql/exec/Task.html#execute(org.apache.hadoop.hive.ql.DriverContext)

2013-05-17 02:00:41

相關問題

1. 如何獲取由Hive編譯器生成的MapReduce Jobs源代碼？
2. Hive Stages mapreduce
3. HIVE：爲什麼Hive在表名Vs中的選擇列上生成mapreduce作業，而不是從tablename中爲select *生成mapreduce？
4. 生成不生成代碼
5. 代碼生成
6. 瞭解Mapreduce代碼
7. 何時將Hive運行MapReduce？
8. T4編輯生成的代碼生成
9. 如何設計生成Python代碼的代碼生成器
10. 試圖從Axis2生成的代碼生成代碼