hadoop - 如何使用动态分区在表上优化Hive查询

Question

我必须根据resultdate格式的2/5/2013 9:24:00 AM字段根据日期和小时对表进行分区。

我正在使用日期和小时进行动态分区，并执行

insert overwrite table partition(date, hour)
{
select x,y,z, date , hour
}
from table 1.

我有大约150万条记录，大约需要4个小时才能完成。这是正常现象吗，有哪些优化方法？

Answer 1

增加群集大小，否则将花费很多时间。