c++ - 如何使用 ffmpeg 解码 AAC 网络音频流

Question

我使用 ffmpeg 实现了一个网络视频播放器(如 VLC)。但它无法解码从 IP 摄像机接收到的 AAC 音频流。它可以解码 G711、G726 等其他音频流。我将编解码器 ID 设置为 AV_CODEC_ID_AAC，并设置 AvCodecContext 的 channel 和采样率。但是 avcodec_decode_audio4 失败，错误代码为 INVALID_DATA。我检查了以前提出的问题，我尝试使用“config=1408”的媒体格式特定参数向 AvCodecContext 添加额外字节。我将 extradatabytes 设置为“20”和“8”的 2 个字节，但它也不起作用。我感谢任何帮助，谢谢。

IP CAMERA SDP:
a=rtpmap:96 mpeg4-generic/16000/1
a=fmtp:96 streamtype=5; profile-level-id=5; mode=AAC-hbr; config=1408; SizeLength=13; IndexLength=3; IndexDeltaLength=3 

AVCodec* decoder = avcodec_find_decoder((::AVCodecID)id);//set as AV_CODEC_ID_AAC

AVCodecContext* decoderContext = avcodec_alloc_context3(decoder);   

char* test = (char*)System::Runtime::InteropServices::Marshal::StringToHGlobalAnsi("1408").ToPointer();
unsigned int length;
uint8_t* extradata = parseGeneralConfigStr(test, length);//it is set as 0x14 and 0x08

decoderContext->channels = number_of_channels; //set as 1
decoderContext->sample_rate = sample_rate; //set as 16000
decoderContext->channel_layout = AV_CH_LAYOUT_MONO;
decoderContext->codec_type = AVMEDIA_TYPE_AUDIO;

decoderContext->extradata = (uint8_t*)av_malloc(AV_INPUT_BUFFER_PADDING_SIZE + length);
memcpy(decoderContext->extradata, extradata, length);
memset(decoderContext->extradata+ length, 0, AV_INPUT_BUFFER_PADDING_SIZE);

Answer 1

您是否检查过 INVALID_DATA 的数据？
您可以根据 RFC 检查它
RFC3640 (3.2 RTP Payload Structure)
AAC Payload 可以像下面这样分开AU-Header | Size Info | ADTS | Data示例负载 00 10 0c 00 ff f1 60 40 30 01 7c 01 30 35 ac根据你分享的配置
AU 大小 (SizeLength=13)
AU-Index/AU-Index-delta (IndexLength=3/IndexDeltaLength=3)
AU-Header 的比特长度为13(SizeLength) + 3(IndexLength/IndexDeltaLength) = 16 .
AU- header 00 10您应该使用 AU-size(SizeLength) 值作为尺寸信息

AU-size: Indicates the size in octets of the associated Access Unit in the Access Unit Data Section in the same RTP packet.

前 13 (SizeLength) 位 0000000000010等于 2。因此请阅读 2 个八位字节以获取大小信息。
尺码信息 0c 00广告 ff f1 60 40 30 01 7c ADTS Parser
标识 MPEG-4
MPEG 层 0
CRC 校验和不存在 1
轮廓低复杂度轮廓 (AAC LC)
采样频率 16000
私有(private)位 0
channel 配置1
原件/复印件 0
主页 0
版权标识位 0
版权识别开始0
AAC帧长384
ADTS 缓冲区充满度 95
第 0 帧中没有原始数据 block
数据以 01 30 35 ac 开头.