csv - 使用 AWS Data Pipeline 在 CSV/TSV 文件中创建列标题？

Question

我正在使用 AWS Data Pipeline 创建 CSV 和 TSV 文件。文件创建得很好，但我不知道如何创建带有列标题的文件。

起初，我希望 header 会根据我为获取导出而运行的 SQL 查询自动生成。那没有用，但没关系。

然后我向 DefaultDataFormat3 特征/节点的“列”属性添加了一个列定义列表。

{
  "escapeChar": "\\",
  "name": "DefaultDataFormat3",
  "column": [
    "id INT",
    "field1 STRING",
    "field2 STRING"
  ],
  "columnSeparator": "|",
  "id": "DataFormatId_jEXqL",
  "type": "TSV",
  "recordSeparator": "\\n"
}

我仍然只获得导出中没有标题行的 CSV 和 TSV。

Answer 1

我遇到了一个 blog post解释一个解决方案。如果您对数据使用查询，则可以添加列名称作为第一个结果:

SELECT 'firstName', 'lastName', 'email'
UNION ALL
SELECT firstName, lastName, email
FROM users