android - 如何使用 MediaCodec 和 MediaMuxer 录制视频和音频

Question

我能够在 MediaCodec 和 MediaMuxer 的帮助下录制(编码)视频。接下来，我需要在 MediaCodec 和 MediaMuxer 的帮助下处理音频部分并将音频与视频混合。

我面临两个问题:

1. 如何使用 MediaCodec 对音频进行编码。我需要编码音频和单独线程中的视频？

2. 如何将音频和视频数据传递给 MediaMuxer(如writeSampleData() 方法一次只接受一种类型的数据)？

我提到了 MediaMuxerTest但它正在使用 MediaExtractor。我需要使用 MediaCodec，因为视频编码是使用 MediaCodec 完成的。如果我错了，请纠正我。

任何建议或忠告都将非常有帮助，因为没有适用于这些新 API 的适当文档。

注意:

1. 我的应用面向 API 18+ (Android 4.3+)。
2. 我提到了Grafika用于视频编码。

Answer 1

1. 不，您不一定需要单独的音频线程，只需使用两个单独的 MediaCodec 实例即可。

2. writeSampleData的第一个参数是trackIndex，它允许您指定每个数据包对应的轨道。 (通过运行 addTrack 两次，每个轨道一次，您将获得两个单独的轨道 ID。)