mysql - 基于父子关系的 MySQL 的 Talend Open Studio 数据迁移

Question

我正在使用 Talend Open Studio 进行数据迁移，因为我正在将现有的应用程序架构升级到新的架构。我在两个应用程序中都使用 MySQL，但架构不同。我已经成功地在单个表之间迁移了数据，但是当我将数据从单个表传输到具有外键约束的父子关系表时，数据传输速度非常慢。例如我正在将 Cities 表迁移到 Cities 和 Citiesi18n，下面是它们的架构:

我的旧模式:

CITIES (
  id   
  city_name
  status
  created_at
)

我需要迁移数据的新创建模式:

CITIES (
  id   
  status
  created_at
)

CITIESI18N (
  id           
  lang_code
  name
  fk_city_id      (// foreign key of cities table)
)

以下是我的 Talend 作业的快照:

这是 tmap 配置:

现在，当我在没有外键的情况下传输数据时，结果非常快。见下文:

但是当我使用外键传输时，我的传输速度非常慢:

(注意:我以省份表为例，因为它与城市表类似)

我认为对于外键约束，它必须在传输数据时对列进行索引，从而使其变慢，但我不确定。有什么办法可以解决这个问题，因为我有很多与此类似的表需要迁移。我只是想知道原因。

Answer 1

我不知道您为什么会有这种行为:您可以尝试将“provience_i18n”重定向到 tHashOutput(缓存组件)，然后使用 tHashInput(指的是您的 tHashOutput)-->tMySQLOutput 链接到子作业。您将有 2 个子作业，每个插入一个。