google-cloud-platform - GCP BigQuery 资源级成本汇总

Question

我正在研究从 BigQuery 获取资源成本的解决方案。

由于 GCP 已弃用 CSV/JSON，因此我们最近转向 BigQuery 实现来收集账单信息。

尽管 Bigquery 仅提供 SKU 级计费信息，但我们的应用程序还需要收集资源级计费信息。

使用报告可以在云存储中导出为 CSV 文件，其中包含每个资源的测量 ID、资源 ID 和使用单位。但是，在 BigQuery 中，我们没有 Measurement id 来匹配使用报告来获取资源级别的计费信息。

Bigquery 的计费结果如下。

需要有关我们如何收集资源级成本以及 BigQuery 订单项的信息。

Answer 1

以下查询可以为您提供(用户电子邮件和处理的总字节数)。由于我们知道 BQ 在过去“N”天处理的总字节数，因此我们可以估算 BQ 分析的成本

 SELECT
   user_email,
   sum(total_bytes_processed)

FROM `region-us`.INFORMATION_SCHEMA.JOBS_BY_PROJECT
WHERE creation_time BETWEEN TIMESTAMP_SUB(CURRENT_TIMESTAMP(), INTERVAL 10 DAY) 
 AND CURRENT_TIMESTAMP()
 AND job_type = "QUERY"
 AND end_time BETWEEN TIMESTAMP_SUB(CURRENT_TIMESTAMP(), INTERVAL 10 DAY) AND CURRENT_TIMESTAMP()
group by user_email