ios - 将视频同步到 openGL 动画

Question

我正在尝试将视频同步到在 iPad 上使用 openGL 绘制的动画，但有两件事我不确定该怎么做:

1. 找到当前播放的视频帧。
2. 确保视频更新和 openGL 绘图更新完全同时进行，因为即使是轻微的同步问题也可能会导致视觉失真。

Answer 1

不确定它是否有效，但您可以使用 AVPlayer 而不是使用 MPMoviePlayerController并使用和AVSynchronizedLayer将您的 OpenGL 层时间与 AVPlayerLayer 的时间同步。

您可以像这样创建视频播放器:

NSURL *videoURL = [NSURL fileURLWithPath:@"your_url"];
AVURLAsset *asset = [AVURLAsset URLAssetWithURL:videoURL options:nil];
AVPlayerItem *playerItem = [AVPlayerItem playerItemWithAsset:asset];

UIView *playerView = [[UIView alloc] initWithFrame:frame];
AVPlayer *player = [AVPlayer playerWithPlayerItem:playerItem];
AVPlayerLayer *playerLayer = [AVPlayerLayer playerLayerWithPlayer:player];
[playerLayer setFrame:[[playerView layer] bounds]];

然后创建一个 AVSynchronizedLayer 层并将其与 playerLayer 同步:

AVSynchronizedLayer *syncLayer = [AVSynchronizedLayer synchronizedLayerWithPlayerItem:playerItem];
[syncLayer addSublayer:yourGlView.layer];

[playerView.layer addSublayer:playerLayer];
[playerView.layer addSublayer:syncLayer];

[self.view addSubview:playerView];
...