ios - OpenTok，TokBox ios SDK中的音频SampleBuffer在哪里

Question

我正在使用 OpenTok iOS SDK 从 iphone 流式传输到 chrome。我想做的是在流式传输时录制视频的高分辨率版本。

通过来自 Example 2 Let's Build OTPublisher 的 OTVideoCapture 接口(interface)使用自定义视频捕获器，我可以成功地将视频样本缓冲区记录到文件中。问题是，我找不到任何关于从麦克风收集的音频数据的引用。

我假设它使用 audioInput(AVCaptureDeviceInput)，通过 AVCaptureAudioDataOutputSampleBufferDelegate 到 audioOutput(AVCaptureAudioDataOutput) 在某处使用。

有谁知道如何从 OpenTok iOS SDK 访问它？

Answer 1

captureOutput:didOutputSampleBuffer:fromConnection , fromConnection 字段会区分音频和声音连接并提供相应的缓冲区。

要设置音频输入/输出，您可以尝试使用 Let-Build-OTPublisher initCapture 方法

    //add audio input / outputs
AVCaptureDevice * audioDevice = [AVCaptureDevice defaultDeviceWithMediaType:AVMediaTypeAudio];
_audioInput = [AVCaptureDeviceInput deviceInputWithDevice:audioDevice error:nil];
if([_captureSession canAddInput:_audioInput])
{
    NSLog(@"added audio device input");
    [_captureSession addInput:_audioInput];
}

_audioOutput = [[AVCaptureAudioDataOutput alloc] init];
if([_captureSession canAddOutput:_audioOutput])
{
    NSLog(@"audio output added");
    [_captureSession addOutput:_audioOutput];
}


[_audioOutput setSampleBufferDelegate:self queue:_capture_queue];