hadoop - Hive 如何查询转换后的变量；失败 : SemanticException [Error 10004]

Question

我正在尝试查询特定格式的日期:

我有这个问题:

SELECT 
    REGEXP_REPLACE(datewithoutdash,
    '^(\\d{2})(\\d{2})(\\d{2})(.*)$','20\\1-\\2-\\3') 
    datewithdash 
     FROM table1 WHERE datewithdash < "2016-11-10";

为什么我不能在新变量上使用where子句？

我收到这个错误:

FAILED: SemanticException [Error 10004]: Line 26:14 Invalid table alias or column reference 'datewithdash': (possible column names are: ...)

Answer 1

Hive 在同一查询中评估 where 子句时不知道 select 子句中的别名列名。不幸的是，您要么必须嵌套它，要么将转换函数复制到 where 子句中:

SELECT 
    REGEXP_REPLACE(datewithoutdash,
    '^(\\d{2})(\\d{2})(\\d{2})(.*)$','20\\1-\\2-\\3') as datewithdash 
FROM 
     table1 
WHERE 
    REGEXP_REPLACE(datewithoutdash,
    '^(\\d{2})(\\d{2})(\\d{2})(.*)$','20\\1-\\2-\\3')  < "2016-11-10";

或

select * from (
    SELECT 
        REGEXP_REPLACE(datewithoutdash,
        '^(\\d{2})(\\d{2})(\\d{2})(.*)$','20\\1-\\2-\\3') as datewithdash 
    FROM 
         table1 
    ) a
WHERE 
    datewithdash  < "2016-11-10";

另一个注意事项 - 该函数非常讨厌 - 您可能会使用像这样的 hive 函数中的构建:

to_date(unix_timestamp(datewithoutdash,'yyMMdd'))

相反 - 它可能更清晰。