ios - 如何将 Color32[] 图像从 WebCamTexture 转换为 iOS 中的 UIImage？

Question

有谁知道如何有效地做到这一点？我正在使用 EncodeToPNG() 函数，但性能真的很慢。

我正在尝试使用 WebCamTexture 捕获 Ipad 相机图像并将其发送到 Objective C 端进行一些处理。我注意到可以发送纹理的 native 地址，但我应该如何在 ObjC 端处理它？有人对此有任何提示吗？

谢谢!

Answer 1

正如您所说的 EncodeToPNG 的性能太慢，您需要做的是在相机源从 iOS ( objc ) 发送到 Unity 的 WebCamTexture 之前挂入代码。

我们使用了类似的技术和一个名为 CameraCaptureKit (https://www.assetstore.unity3d.com/en/#!/content/56673) 的插件来卡住发送到 Unity 的图像，同时等待 Flash 和防抖被打开。

在Unity生成的xcode工程中打开CameraCapture.mm，找到函数。

- (void)captureOutput:(AVCaptureOutput*)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection*)connection

然后可以通过修改这段代码来修改发送到Unity的WebCamTexture的图片。 UnityDidCaptureVideoFrame 是您要插入的代码。

intptr_t tex = (intptr_t)CMVideoSampling_SampleBuffer(&self->_cmVideoSampling, sampleBuffer, &self->_width, &self->_height);
UnityDidCaptureVideoFrame(tex, self->_userData);

干杯