iphone - 从 iPhone 上传直播视频，例如 Ustream 或 Qik

Question

如何将视频从 iPhone 直播到 Ustream 或 Qik 等服务器？我知道 Apple 有一种叫做 Http Live Streaming 的东西，但我发现的大多数资源都只讨论从服务器到 iPhone 的流式视频。

我应该使用 Apple 的 Http Living Streaming 吗？或者是其他东西？谢谢。

Answer 1

据我所知，没有内置的方法可以做到这一点。如您所说，HTTP Live Streaming 用于下载到 iPhone。

我这样做的方法是实现一个 AVCaptureSession，它有一个委托(delegate)和一个在每一帧上运行的回调。该回调通过网络将每个帧发送到服务器，该服务器具有接收它的自定义设置。

流程如下:https://developer.apple.com/library/content/documentation/AudioVideo/Conceptual/AVFoundationPG/Articles/04_MediaCapture.html#//apple_ref/doc/uid/TP40010188-CH5-SW2

下面是一些代码:

// make input device
NSError *deviceError;
AVCaptureDevice *cameraDevice = [AVCaptureDevice defaultDeviceWithMediaType:AVMediaTypeVideo];
AVCaptureDeviceInput *inputDevice = [AVCaptureDeviceInput deviceInputWithDevice:cameraDevice error:&deviceError];

// make output device
AVCaptureVideoDataOutput *outputDevice = [[AVCaptureVideoDataOutput alloc] init];
[outputDevice setSampleBufferDelegate:self queue:dispatch_get_main_queue()];

// initialize capture session
AVCaptureSession *captureSession = [[[AVCaptureSession alloc] init] autorelease];
[captureSession addInput:inputDevice];
[captureSession addOutput:outputDevice];

// make preview layer and add so that camera's view is displayed on screen
AVCaptureVideoPreviewLayer *previewLayer = [AVCaptureVideoPreviewLayer layerWithSession:captureSession];
previewLayer.frame = view.bounds;
[view.layer addSublayer:previewLayer];

// go!
[captureSession startRunning];

然后输出设备的委托(delegate)(这里是 self)必须实现回调:

-(void) captureOutput:(AVCaptureOutput*)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection*)connection
{
    CVImageBufferRef imageBuffer = CMSampleBufferGetImageBuffer( sampleBuffer );
    CGSize imageSize = CVImageBufferGetEncodedSize( imageBuffer );
    // also in the 'mediaSpecific' dict of the sampleBuffer

   NSLog( @"frame captured at %.fx%.f", imageSize.width, imageSize.height );
}

编辑/更新

有几个人问过如何在不将帧一一发送到服务器的情况下做到这一点。答案很复杂……

基本上，在上面的 didOutputSampleBuffer 函数中，您将样本添加到 AVAssetWriter 中。实际上，我同时激活了三个 Assets 编写器——过去、现在和 future ——在不同的线程上进行管理。

过去的作家正在关闭电影文件并上传它。当前编写器正在从相机接收样本缓冲区。 future 的作家正在打开一个新的电影文件并准备数据。每 5 秒，我设置 past=current; current=future 并重新启动序列。

然后，这会以 5 秒的 block 将视频上传到服务器。如果需要，您可以使用 ffmpeg 将视频拼接在一起，或者将它们转码为 MPEG-2 传输流以进行 HTTP 实时流式传输。视频数据本身由 Assets 编写者进行 H.264 编码，因此转码仅更改文件的 header 格式。