配置單元 - 靜態分區 - 直接創建分區目錄與使用alter table語句之間的區別

Question

在配置單元中創建靜態分區的下面兩條語句之間是否存在任何內部/性能差異，我嘗試了兩種方法，並且兩者都工作無需將數據加載到分區

dfs -mkdir /user/cloudera/sqoop_import/avroData/orders_part/order_month=2014-02; 
alter table orders_part add partition(order_month='2014-02'); 

Answer 1

之後的任何問題，這條命令：dfs -mkdir /user/cloudera/sqoop_import/avroData/orders_part/order_month=2014-02;不會創建分區，它會創建一個目錄。此目錄尚未作爲表分區裝入。分區是一個目錄加上包含存儲在Metastore中的分區（鍵值+分區目錄）信息的元數據。執行mkdir後，您可以使用show partitions orders_part;命令輕鬆檢查它。該目錄不在分區列表中。

alter table orders_part add partition(order_month='2014-02');創建目錄order_month=2014-02並將其掛載爲分區。

分區可以動態地使用

insert overwrite table orders_part partition(order_month) 
select ... 

命令被創建。在這種情況下，目錄將自動創建並掛載爲分區。

請考慮這一點：您可以使分區不一定位於等於'key = value'的目錄中。例如：alter table orders_part add partition(order_month='2014-02') location '/user/cloudera/sqoop_import/avroData/orders_part/mydir' ;請注意分區目錄現在爲'/user/cloudera/sqoop_import/avroData/orders_part/mydir'。