swift - ARKit – 如何检测 sceneView 中特定特征点的颜色？

Question

我想获取场景 View 中特定特征点处检测到的世界对象的颜色。例如，我在 (x:10, y:10, z:10) 处检测到一个特征点。

如何获取此位置的object/surface的颜色？

Answer 1

目前无法使用 ARKit 方法(与您在许多合成应用程序中看到的方式相同)在特征点下获取真实世界对象的颜色。没有 ARKit 方法允许您将特征点的 Alpha 乘以视频流中相应像素的 RGB 值。

.showFeaturePoints 是 ARSCNView 的扩展调试选项 ARSCNDebugOptions。此选项仅允许您显示在世界中检测到的 3D 特征点。

@available(iOS 11.0, *)
public static let showFeaturePoints: SCNDebugOptions

But I'm sure that you can try to apply a CIFilter to ARKit camera feed containing feature points.

你场景中的特征点是黄色的，所以你可以使用Chroma Key Effect提取 Alpha channel 。然后你需要将这个 Alpha 乘以来自相机的 RGB。所以您将获得颜色编码特征点。

您也可以使用来自 Core Image Compositing Operations 的 CIDifferenceBlendMode 操作.你需要两个源——一个有特征点，另一个没有。然后你必须修改这个Difference op的结果并在乘法之前将它分配给Alpha channel 。