azure-data-explorer - 从 Kusto 流式传输数据

Question

关于流式摄取的 ADX 文档已经足够多了，但我没有找到任何关于从 Kusto 流式摄取它的信息。即使连续导出也有导出频率的最低限制(我认为是 5 分钟)，这远不是流式导出方法。有没有办法将大量数据从 ADX 流式传输到 BLOB 或 ADLS Gen2？

Answer 1

连续导出是从 Kusto 连续导出大量数据的推荐方法，因为导出是分布式的。最小频率是一分钟，请参阅 doc 中的“频率”部分:

其他大量数据导出，使用SDK中适用的方法。例如，这里是 Java SDK这是 .Net 示例:

KustoConnectionStringBuilder kcsb = new KustoConnectionStringBuilder(connectionString);
kcsb.Streaming = true;

using (KustoDataContext context = new KustoDataContext(kcsb))
using (var reader = context.ExecuteQuery(query, requestProperties: requestProperties))
using (var csvStream = new CsvFromDataReaderJitStream(reader, leaveOpen: false, writeHeader: true))
{
  // consume stream here
}