azure-data-lake - 我们如何在基于时间戳作业的 Azure 数据湖中的 u-sql 中获得动态输出文件名

Question

我们如何在执行作业时根据时间戳在 Azure 数据湖中的 u-sql 中动态输出文件名。感谢您的帮助。我的代码如下:

 OUTPUT @telDataResult
    TO 
    @"wasb://blobcontainer@blobstorage.blob.core.windows.net/**yyyymmdd**_TelDataOutput.Csv"

    USING Outputters.Csv(); 

Answer 1

此功能目前正在开发中，但尚不可用。欢迎为功能请求投票:https://feedback.azure.com/forums/327234-data-lake/suggestions/10550388-support-dynamic-output-file-names-in-adla

一旦可用，您将在 EXTRACT 上执行与文件集语法相反的操作。假设您的行集 @res 中有一个名为 eventdate 的列。然后以下 OUTPUT 语句将生成文件:

OUTPUT @res
TO "/{eventdate:yyyy}/{eventdate:MM}/{eventdate:dd}/result.csv"
USING Outputters.Csv();