ios - 在 Metal 计算着色器中使用MPSImageConvolution内核

Question

我正在使用位于https://github.com/FlexMonkey/MetalVideoCapture的MetalVideoCapture示例。我在版本中所做的唯一更改是使用带有内核值的MPSImageConvolution(而不是MPSImageGaussianBlur):

[-2.0, -1.0, 0.0,
 -1.0,  1.0, 1.0, 
  0.0,  1.0, 2.0]

使用上面的值无法以任何可见的方式更改输出。但是边缘增强了内核例如

[0.0, -1.0, 0.0, 
 0.0,  1.0, 0.0, 
 0.0,  0.0, 0.0]

有用，只按主要顺序排列即可；即使多数民众赞成在MPSImageConvolution期望的那样，它也不以行为主的顺序工作。我真的为此感到难过。我不知道是否有明显的原因卷积内核无法在计算管道中工作(仅在渲染管道中)，但是我无法在线找到任何信息。

我还修改了代码库，将内核应用于静态图像，而不是实时视频源。但是，这产生了相同的结果。

我还想指出，我在示例项目的留言板上( https://github.com/FlexMonkey/MetalVideoCapture/issues/1#issuecomment-217609500)发布了相同的问题。该示例的作者和我一样受挫，这使我相信这是某种错误或我的概念性知识中的空白，为什么这甚至不起作用。

Answer 1

我确实有一种解决方法，那就是避免使用就地纹理。尝试以下操作:创建一个单独的目标纹理:

    let descriptor = MTLTextureDescriptor.texture2DDescriptorWithPixelFormat(
        drawable.texture.pixelFormat,
        width: drawable.texture.width,
        height: drawable.texture.height,
        mipmapped: false)

    let destination: MTLTexture = device!.newTextureWithDescriptor(descriptor)

让 YCbCrColorConversion着色器定位目标:

commandEncoder.setTexture(destination, atIndex: 2) // out texture

...然后使用使用目标的替代 encodeToCommandBuffer:

encodeToCommandBuffer(commandBuffer, sourceTexture: destination, destinationTexture: drawable.texture)

这些东西可以删除:

//        let inPlaceTexture = UnsafeMutablePointer<MTLTexture?>.alloc(1)
//        inPlaceTexture.initialize(drawable.texture)

西蒙

感谢 Warren!