1. 程式人生 > >Hive初識(二)

Hive初識(二)

Hive分割槽

Hive組織表到分割槽。它是將一個表到基於分割槽列,如日期,城市和部門的值相關方式。使用分割槽,很容易對資料進行部分查詢。

表或分割槽是細分成桶,以提供額外的結構,可以使用更高效的查詢的資料。桶的工作是基於表的一些列的雜湊函式值。

例如,一個名為Tab1表包含僱員資料,如id,name,dept和yoj(加盟年份)。假設需要檢索所有在2012年加入,查詢搜尋整個表所需的資訊員工的詳細資訊。但是,如果用年份分割槽僱員資料並將其儲存在一個單獨的檔案,它減少了查詢處理的時間。下面的示例演示如何分割槽的檔案和資料:

下面檔案包含employee資料表。

/tab1/employeedata/file1

id, name, dept, yoj
1, gopal, TP, 2012
2, kiran, HR, 2012
3, kaleel,SC, 2013
4, Prasanth, SC, 2013

上面的資料被劃分成使用年兩個檔案。

/tab1/employeedata/2012/file2

1, gopal, TP, 2012
2, kiran, HR, 2012

/tab1/employeedata/2013/file3

3, kaleel,SC, 2013
4, Prasanth, SC, 2013


新增分割槽

可以通過新增分割槽表改變所述表。假設我們有一個表叫employee,擁有如 Id, Name, Salary, Designation, Dept, 和 yoj等欄位。

語法:

ALTER TABLE table_name ADD [IF NOT EXISTS] PARTITION partition_spec
[LOCATION 'location1'] partition_spec [LOCATION 'location2'] ...;

partition_spec:
: (p_column = p_col_value, p_column = p_col_value, ...)

以下查詢用於將分割槽新增到employee表。

hive> ALTER TABLE employee
> ADD PARTITION (year=’2013’)
> location '/2012/part2012';


重新命名分割槽

此命令的語法如下:

ALTER TABLE table_name PARTITION partition_spec RENAME TO PARTITION partition_spec;

以下查詢用來命名一個分割槽:

  ALTER TABLE employee PARTITION (year=’1203’) RENAME TO PARTITION (Yoj=’1203’);


刪除分割槽

下面語法用於刪除分割槽:

ALTER TABLE table_name DROP [IF EXISTS] PARTITION partition_spec, PARTITION partition_spec,...;

以下查詢是用來刪除分割槽:

ALTER TABLE employee DROP [IF EXISTS] PARTITION (yeat='1203');