ios - iOS 中给定图像的多个自定义对象检测(图像处理)

Question

我想获取使用其框架检测到的自定义对象。

• 我已经检查过这一点，我得到了很多 ARKit 实现 - 使用它我们可以获得实时对象检测(即使用输入流作为相机流)，但我的要求是从给定的/静态图片。

• 我发现最新的 iOS 指南/示例使用相机作为输入流，提供分类或矩形或人脸检测等。

  • 我的问题是我需要从具有自定义多个对象的给定图像中获取它。

    例如，我需要在给定图像(墙上有多个不同类型的时钟的图像)中识别时钟，这里我可以提供示例时钟图像。所以我需要获取已识别的时钟及其框架。

    我已经检查过使用 Vision 的 VNImageBasedRequest 进行对象分类，我可以在其中使用自定义训练的 CoreML 模型进行分类，但是没有获取 boundingBox 属性来获取帧，这在 VNDetectedObjectObservation 中可用.

提前感谢您的宝贵时间和回复。

Answer 1

您可以使用 Google Cloud AutoML 视觉对象检测来做到这一点。如果您想检测自定义对象，您需要创建自己的自定义模型数据集并对其进行训练。训练模型后，您可以将其托管在云端并从 iOS 应用程序调用 API 以检测静态图像中的对象(在线)，或者您可以将经过训练的模型添加到您的项目中从图像中检测对象(离线)。您可以在此处找到完整的文档 https://cloud.google.com/vision/automl/object-detection/docs/before-you-begin

如果您能够以任何其他方式完成它，请告诉我怎么做，即使我正在处理类似的用例。