mysql - 从 MySQL 中选择表名作为文件到 HDFS

Question

在 MySQL 数据库中，我有 100 个表。一些表名的结尾类似如下

123_testing
124_testing
125_testing_10
and so on

现在我想选择以 _testing 结尾的表并将结果作为 hdfs 中的文件。

我想将表名作为文件发送到 HDFS。

我们该怎么做。

我可以使用 sqoop list-tables 但它会给我所有表和本地机器上的结果。我们不能为此指定 --target-dir 选项。

Answer 1

list-tables 不接受 --target-dir 参数。

表名在 MySQL 的 information_schema 数据库中可用。此查询将获取 db_name 中以 _testing 结尾的表。

select TABLE_NAME from TABLES where TABLE_SCHEMA='db_name' and TABLE_NAME like '%_testing';

在 sqoop-import 中使用带有 --query 参数的查询，然后使用 --target-dir。