machine-learning - 深度学习模型查找相似图像(局部敏感哈希)

Question

同一个物体有不同的图片。图片的角度不同，所以虽然图片上的物体是相同的，但图片本身可能会有很大不同。

是否有一个示例或准备使用深度学习模型来为同一对象的不同图片生成相似/接近的向量？ (似乎人脸检测的工作方式有点相似......)

Answer 1

您正在寻找的是一个连体网络，您可以在其中通过同一网络传递两个图像，并尝试最大化不同图像之间的距离并最小化相似图像之间的距离。另一种变体使用三个图像而不是两个，其中一个充当 anchor ，另外两个图像属于与原始图像相同的类别，其他图像属于不同的类别，并且您尝试分别最小化和最大化与 anchor 的距离。实现这一点的损失函数是对比损失函数。看here用于实现对比损失。并且您可以在这样的设置中使用任何标准架构，我个人发现 VGG-16 易于调整且简单。

以下是一些您应该查看的论文，以了解其背后的数学和理论

1. Learning visual similarity for product design
2. Learning a Similarity Metric Discriminatively, with Application to FaceVerification