android - MPEG-TS、Android 和 FFMPEG

Question

我正在接收带有复用 H.264 视频和 AAC 音频流的 MPEG-TS(MPEG 传输流)数据包。我需要能够在 Android 手机上显示音频和视频。我的假设是我需要:

• MPEG-TS 解复用器
• AAC解码器
• H.264解码器
• 同步音频和视频播放

假设我是对的(在 Android 2.x 中)MPEG-TS 解复用器不是操作系统的一部分，必须移植，AAC 和 H.264 解码器都是 Android 操作系统的一部分，但我是不确定它们是否有接口(interface)，允许在缓冲区中传递数据，以及它们是否允许相互定时同步。在最坏的情况下，这些组件也必须移植到这里。

你能给我一些建议从哪里开始吗？我在考虑 FFMPEG 移植。还有其他方法吗？

问候，斯腾

Answer 1

Android 4.x 有 OpenMAX，可以用 H264 和 AAC 播放 TS。您甚至不必担心音频和视频的同步问题。

查看 NDK 中的 nativemedia 示例。

如果您想支持以前版本的 Android，那么 ffmpeg 可能是一个不错的选择，但它最多只能为您提供 RGB 或任何其他格式的解码视频帧和 PCM 解码音频。然后你将不得不自己实现渲染器和音频播放。我建议阅读本教程 - http://dranger.com/ffmpeg/ .它不是特定于 Android 的，但它会让您了解视频播放的工作原理。