ios - 如何在 Metal for iOS 中链接过滤器？

Question

我完成了 this tutorial Simon Gladman (@flexmonkey) 从 AVFoundation 捕获图像并对输出应用过滤器。但是，我正在努力寻找一种方法来用我自己的计算着色器替换模糊滤镜。换句话说，我需要在此处提到的 YCbCrColorConversion 过滤器之后连接我的自定义着色器。

let commandBuffer = commandQueue.makeCommandBuffer()
let commandEncoder = commandBuffer.makeComputeCommandEncoder()
// pipelineState has compiled YCbCrColorConversion filter
commandEncoder.setComputePipelineState(pipelineState)
commandEncoder.setTexture(ytexture, at: 0)
commandEncoder.setTexture(cbcrTexture, at: 1)
commandEncoder.setTexture(drawable.texture, at: 2) // out texture

commandEncoder.dispatchThreadgroups(threadGroups,threadsPerThreadgroup: threadGroupCount)
commandEncoder.endEncoding()

let inPlaceTexture = UnsafeMutablePointer<MTLTexture> .allocate(capacity: 1)
        inPlaceTexture.initialize(to: drawable.texture)

// How to replace this blur with my own filter?????
blur.encodeToCommandBuffer(commandBuffer, inPlaceTexture: inPlaceTexture, fallbackCopyAllocator: nil)

commandBuffer.presentDrawable(drawable)
commandBuffer.commit();

我应该创建一个新的 commandBuffer、commandEncoder 和一个单独的 pipelineState 来编译第二个内核函数吗？这会将第一个过滤器的输出作为第二个过滤器的输入。是否有更有效的方法来执行此操作，或者这是最佳方法？

我是 Metal 的初学者，因此非常感谢任何关于管道工作原理的解释。

Answer 1

您不需要创建新的命令缓冲区或其他计算编码器，但您确实需要创建一个使用您自己的内核函数的计算管道状态。您应该在初始化期间执行一次，无论您当前在何处创建 YCbCr 转换管道状态。

要将效果链接在一起，您需要创建一个中间纹理，作为 YCbCr 转换的输出纹理和内核的输入。可绘制纹理将成为内核函数的输出纹理。您可以像当前为 YCbCr 转换分派(dispatch)工作一样为自己的内核分派(dispatch)工作(即每个线程组的线程数和线程组计数相同)。

中间纹理应该与可绘制对象具有相同的尺寸和格式。您可以延迟创建它并保留对它的引用，当可绘制对象大小发生变化时重新创建它。