iOS，FFmpeg 使用 UIimage 与 OpenGL 渲染视频

Question

我有一个网络摄像机，可以通过 RTSP 流式传输 h264 视频。在 iOS 上，我使用 FFmpeg 捕获 RTSP 流并解码帧，然后使用 UIimage 和 UIimageview 进行渲染。

我看过FFmpeg渲染视频的例子，好像都是用OpenGL ES或者SDL库。

我的问题是使用 OpenGL 有什么好处？因为使用 UIimage 进行渲染很容易，而且看起来工作正常。

Answer 1

• SDL 和 OpenGL 是可移植的跨平台标准

• 这些库使用 GPU 处理数据。这对于图形处理非常有效，并且使您能够 - 例如 - 对视频应用实时过滤器。

Apple 提供 CIImage 用于在 GPU 上处理图像数据。这可以是提供 openGL 和 SDL 的一些好处的更以 cocoa 为中心的方式。参见 Are the Core Image filters in iOS 5.0 fast enough for realtime video processing?对此进行一些有用的讨论。

如果您不需要应用过滤器，并且不需要跨平台代码，您的工作方法就可以了。