sql INSERT 条件作为选择语句？

Question

我正在尝试用 HIVE sql 填充一个表。这里的两个表都有相同的列，但我只关心 tableSource 中尚未在 tableDest 中的行。

表中的行有一个索引字段recordId(不是主要的)。我想添加 tableSource 中 recordId 大于 tableDest 中最高 recordId 的所有行。

我有一个基本的命令结构，但我认为它的语法不正确？

INSERT INTO tableDest
SELECT * FROM tableSource
WHERE tableSource.recordId  >
 (SELECT MAX(recordId) FROM tableDest);

我只想将最后一个 select 语句的值用于条件。

我试过使用变量但没有成功:

SET highest_record =SELECT MAX(recordId) FROM tableDest;
INSERT INTO tableDest
SELECT * FROM tableSource
WHERE tableSource.recordId  > ${hiveconf:highest_record};

Answer 1

not exists 是最好的选择。

INSERT INTO tableDest
SELECT * 
FROM tableSource s
WHERE NOT EXISTS (SELECT 1 
                  FROM tableDest d
                  WHERE s.recordId=d.recordId)