Azure 自定义视觉 : Is it possible to store image metadata (NOT tags) in the Custom Vision environment?

Question

我的图像包含重要文件元数据(例如出处和处理历史记录)，存储在本地或 Azure Blob 存储中。

我想将这些导入(POST)到 Azure 自定义视觉环境(通过 API 或 GUI)(参见 https://southcentralus.dev.cognitive.microsoft.com/docs/services/Custom_Vision_Training_3.0 )进行训练，同时 (i) 保留这些图像元数据并 (ii) 能够检索它们通过 (a) 自定义视觉 API 和 (b) 自定义视觉 GUI 实现。

一个示例用例是，由于与 GDPR 相关的客户请求，从自定义视觉存储中清除特定来源的图像 [旁白:我很欣赏 Azure 认知服务无论如何都可以使用这些数据来改进其模型等。] .

据我所知，引用发布到自定义视觉的图像的唯一方法是通过其 UUID。是否有其他方法来引用与该图像一起存储的元数据或:

1. 这会构成功能请求吗？

2. 图像元数据是否可以存储在图像内部(例如 JPEG EXIF)(假设可以从自定义视觉“环境”中检索图像本身，但事实可能并非如此)？

3. 否则，是将返回的自定义视觉图像 UUID 与所需元数据一起存储在其他地方的数据库中的唯一解决方案吗？

注意，在上面，我所说的元数据不是图像模型端意义上的标签/标签，而是数据端文件元数据。

[请注意，Azure 认知服务正在使用 stackoverflow 进行问答，因此我认为这个问题适合 stackoverflow。]

一如既往的感谢!

Answer 1

我不是 Microsoft 的一员，因此这只是我根据我对 Custom Vision 的使用情况提出的意见。

我了解您的用例，尤其是您提到的 GDPR，但目前添加元数据不是一项功能，无论是通过 API 还是 GUI。

回答您的问题:

Would that constitute a feature request?

当然。您可以在 UserVoice 上为此功能创建一个项目(但首先检查是否没有其他相关的现有项目):https://cognitive.uservoice.com/forums/598141-custom-vision-service

Could the image metadata be stored inside the image (e.g. JPEG EXIF) (assuming it is possible to retrieve the image itself from the Custom Vision "environment", which it may not be)?

例如，您可以使用 API 中的 GetImagesByIds 方法(或 GetTaggedImages/GetUntaggedImages)获取之前发布的图像。请记住，您发布的图像会被处理:缩略图、调整大小的图像是根据您发布的内容生成的。这些方法提供图像的链接。

我做了一个快速尝试: - 将图像上传到 CustomVision 并添加标签 - 获取其ID - 通过API获取图片

好消息:在使用“originalImageUri”链接下载的图像上，我仍然有一些可用的 EXIF(只需在下载后将文件重命名为“.jpg”):

Otherwise, is the only solution to store the returned Custom Vision image UUID in a database elsewhere alongside the required metadata?

目前我认为这显然是最好的解决方案