ios - 音频/视频慢动作中的问题

Question

我正在尝试为我的视频文件和音频做慢动作。在我的例子中，我必须做Ramped 慢动作(逐渐减速和加速像抛物线而不是“线性慢动作”。

引用:线性慢动作:

引用:斜坡慢动作:

到目前为止我做了什么:

前三个项目符号使用 AVFoundation

1. 从视频文件中，分离音频和视频。

2. 使用 AVFoundation api (scaletimeRange) 为视频做慢动作。它确实工作正常。

3. 对于音频，同样不工作。 apple api 本身似乎存在错误(错误 ID:14616144)。相关问题是scaleTimeRange has no effect on audio type AVMutableCompositionTrack

4. 所以我切换到Dirac。后来发现 Dirac 的开源版本有一个限制，它不支持动态时间拉伸(stretch)。

5. 终于尝试使用 OpenAL。

我从 Apple 开发者论坛获取了一个示例 OpenAL 程序并执行了它。

这是我的问题:

1. 我可以在 OpenAl 中存储/保存处理过的音频吗？如果使用“OpenAl”直接不可能，可以使用AVFoundation + OpenAL 来完成吗？

2. 非常重要的是，如何使用 OpenAL 进行慢动作或拉伸(stretch)时间尺度？如果我知道时间拉伸(stretch)，我可以应用斜坡慢动作逻辑。

3. 还有其他办法吗？

Answer 1

我真的不能说 1 或 2，但时间缩放音频可以像重新采样一样简单。如果您的 RAW/PCM 音频以 48 kHz 采样并想要以半速播放，请重新采样到 96 kHz 并以 48 kHz 播放音频。由于您有两倍数量的样本，因此播放时间将增加一倍。一般:

scaledSampleRate = (orignalSampleRate / playRate);

或

playRate = (originalSampleRate / scaledSampleRate);

这将影响音轨的音调，但这可能是所需的效果，因为在“慢动作”音频中这种行为在某种程度上是预期的。有更先进的技术可以在缩放时间的同时保持音高。开源软件 Audacity 实现了这些算法。你可以在那里找到灵感。网络上有许多资源可以解释音高变换与时间拉伸(stretch)之间的权衡。

• http://en.wikipedia.org/wiki/Audio_time-scale/pitch_modification
• http://www.dspdimension.com/admin/time-pitch-overview/

您可能没有考虑过的另一个选项是在慢动作期间将音频静音。这似乎是大多数 AV 播放实用程序所采用的技术。但是，根据您的用例，失真的音频确实表明时间正在被操纵。