azure - U-SQL 提取语句 - 处理数百列

Question

U-SQL 提取语句中是否有任何方法可以仅指定我关心的输入列？我正在使用一个旧数据库，该数据库将多个表导出到包含大约 200 列的 csv。我只关心其中 10 个字段。我希望做这样的事情:

EXTRACT CustomerID:0   string,
    StoreNumber:5    double,
    ReceiptNumber:20   double,
    Timestamp:125   int
FROM "somefile.csv"
USING Extractors.Csv();

因此，我们的想法是指定一个与数据来自哪一列相对应的索引。

作品中有类似的东西吗？或者我是否总是需要定义所有 200 列？我也愿意接受其他解决方案。谢谢!

Answer 1

您可以编写自定义提取器代码。使用 https://github.com/Azure/usql/tree/master/Examples/DataFormats/Microsoft.Analytics.Samples.Formats 处的样本提取器作为指导。