使用一個腳本創建多個月的配置單元分區

Question

我有4年的數據。像

'2011 
2012 
2013 
2014' 

我必須根據一個月的數據運行查詢。所以我創建分區如下。

'ALTER TABLE table1_2010Jan ADD PARTITION(year='2010', month='01', day='01') 
LOCATION 'path'; 
ALTER TABLE table1_2010Jan ADD PARTITION(year='2010', month='01', day='02') 
LOCATION 'path'; 
ALTER TABLE table1_2010Jan ADD PARTITION(year='2010', month='01', day='03') 
LOCATION 'path';' 

我在每個月的每一天創建像上面一樣的單獨分區。

我想知道我們是否可以編寫腳本（任何語言），每次運行一次爲每個月的所有日子創建這些分區？或者是否有一種方法可以在蜂巢本身中執行此操作。

請任何建議..

Answer 1

對於外部表，配置單元不能做到這一點。您可以創建shell/perl腳本來執行相同的操作（使用循環）。

對於配置單元管理表，可以使用MSCK REPAIR命令輕鬆完成。

https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-RecoverPartitions%28MSCKREPAIRTABLE%29

，你必須確保數據被加載唯一的事情是正確的分區。