- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我正在寻找编码网络摄像头流的最快方法,该流将在 html5 视频标签中可见。我正在使用 Pandaboard:http://www.digikey.com/product-highlights/us/en/texas-instruments-pandaboard/686#tabs-2对于硬件。可以使用gstreamer、cvlc、ffmpeg。我将使用它来驱动机器人,因此视频流中需要的延迟最少。质量不一定很好,也不需要音频。此外,这仅适用于一个客户端,因此带宽不是问题。迄今为止最好的解决方案是使用带有 mpjpeg 的 ffmpeg 给我大约 1 秒的延迟。有更好的吗?
最佳答案
我已经被问过很多次了,所以我会尝试笼统地回答这个问题,而不仅仅是针对 mjpeg。在系统中获得非常低的延迟需要一些系统工程工作以及对组件的理解。
我能想到的一些简单的顶级调整是:
确保编解码器配置为最低延迟。编解码器(尤其是嵌入式系统编解码器)将具有低延迟配置。启用它。如果您使用的是 H.264,它是最有用的。大多数人没有意识到按照标准要求,H.264 解码器需要在显示帧之前对其进行缓冲。 Qcif 最多 16 帧,720p 最多 5 帧。第一帧的输出有很多延迟。如果您不使用 H.264,请确保您没有启用 B 图片。这增加了获取第一张图片的延迟。
由于您使用的是 mjpeg,我认为这对您不太适用。
编码器也会有一个速率控制延迟。 (称为初始化延迟或 vbv buf 大小)。将其设置为提供可接受质量的最小值。这也将减少延迟。将其视为编码器和解码器之间的比特流缓冲区。如果您使用的是 x264,那将是 vbv 缓冲区大小。
一些简单的其他配置: 使用尽可能少的 I 图片(大内期)。
我的图片很大,增加了通过网络发送的延迟。这在端到端延迟在 1 秒或更长范围内的系统中可能不是很明显,但是当您设计需要 100 毫秒或更短的端到端延迟的系统时,这和其他几个方面都会发挥作用。还要确保您使用的是低延迟音频编解码器 aac-lc(而不是 heaac)。
在您的情况下,为了降低延迟,我建议远离 mjpeg 并至少使用没有 B 图片的 mpeg4(简单配置文件)或最好是 H.264 基线配置文件(x264 提供零延迟选项)。您将获得较低延迟的简单原因是您将获得较低的比特率后编码以发送数据并且您可以进入全帧率。如果您必须坚持使用 mjpeg,那么在没有使用开源组件的编解码器和系统提供更高级功能支持的情况下,您可以获得的效果非常接近。
另一方面是将内容传输到显示单元。如果您可以使用 udp,与 tcp 相比,它将大大减少延迟,尽管根据网络条件有时可能会丢失。您提到了 html5 视频。我很好奇您如何对 html5 视频标签进行实时流式传输。
还有其他方面可以调整,我会放在高级类别中,需要系统工程师尝试各种事情
操作系统中的网络缓冲是什么?出于性能原因,操作系统还会在发送数据之前对其进行缓冲。调整它以获得性能和速度之间的良好平衡。
您使用的是 CR 还是 VBR 编码?虽然 CBR 非常适合低抖动,但如果编解码器提供,您也可以使用 capped vbr。
您的解码器可以开始解码部分帧吗?因此,您不必担心在将数据提供给解码器之前对其进行分帧。尽快将数据推送到解码器。
你能做字段编码吗?在输出第一张图片之前将帧编码时间减半。
每当切片可立即通过网络发送时,您可以使用回调进行切片编码吗?
使用了我在上述所有方法中工作过的低于 100 毫秒的延迟系统。有些功能在开源组件中可能不可用,但如果你真的需要它并且有热情,你可以继续实现它们。
编辑:
我意识到你不能为 ipad 流媒体解决方案做很多上述事情,并且由于 hls 也有限制,你可以实现的延迟。但我希望当您需要任何低延迟系统时,它会在其他情况下证明是有用的。
关于ffmpeg - 寻找最快的视频编码器,将网络摄像头流式传输到 ipad,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/12020430/
我一直在做一些关于测量数据传输延迟的实验 CPU->GPU 和 GPU->CPU。我发现对于特定消息大小,CPU->GPU 数据传输速率几乎是 GPU->CPU 传输速率的两倍。谁能解释我为什么会这样
我将 ElasticSearch 用作我的 Post 模型的 Rails pet 项目应用程序的全文引擎。在我的 posts_controller.rb 索引操作中: def index
概述 流经网络的数据总是具有相同的类型:字节,这些字节如何传输主要取决于我们所说的网络传输。用户并不关心传输的细节,只在乎字节是否被可靠地发送和接收 如果使用 Java 网络编程,你会发现,某些时候当
我正在编写一些代码,以便将共享点从该页面转移到另一个页面: Server.Transfer("/DefectManagement/DefectList/default.aspx") 但是我遇到了这个问
我有这个泄漏,任何猜测?这个类有一些奇怪的引用。我的代码的任何地方都没有 contentobserver In com.example:1.5.0:27. com.example.ui.record
我听说过点对点内存传输并阅读了一些关于它的内容,但无法真正理解与标准 PCI-E 总线传输相比它的速度有多快。 我有一个使用多个 GPU 的 CUDA 应用程序,我可能对 P2P 传输感兴趣。我的问题
ftping 文件时,Transmit 中是否有忽略或过滤器列表?我希望它忽略上传 .svn 文件等。 最佳答案 是的。转到首选项并选择 Rules标签。在那里您可以定义要跳过哪些文件的规则。实际上,
我有以下片段来生成声音,在 while 循环中,我想动态更改它,以便它在声音生成期间创建不同频率的声音。 for(uint16_t i = 0; i < sample_N; i++) { da
我正在尝试使用 Delphi 2010 和 Indy 对 Web 服务进行概念验证。我此时的代码是: procedure TForm1.Log(const sEvent, sMsg: String);
我有一个 ActiveMQ JMS 代理,在端口 61616 上使用默认的 openwire TCP 传输公开。 我有许多远程客户端可以绑定(bind)到此代理来监听他们的消息。 如果我想打开 kee
reconnection strategies文档仅使用 JMS 示例,但是 FTP transport documentation确实说明了重新连接策略的使用,但没有任何细节或示例。 进一步,如果你
我有 2 个 TreeView,第一个填充有项目。 try { CheckBoxTreeItem treeRoot = new CheckBoxTreeItem("Root"); tr
在我为学校开发的一个网站上,用户输入他们的学校电子邮件和密码,如果他们已注册,则登录。如果没有,则会显示登录的第二部分,要求输入笔名称并确认密码。正因为如此,以及我复杂的业余 Django 编程,我有
我正在开发一个 Web 服务,我们在其中使用 LINQ-to-SQL 进行数据库抽象。当客户使用我们的网络服务时,对象被序列化为 XML,一切都很好。 现在我们希望开发我们自己的使用本地数据类型的客户
我应该创建一个名为“Backwards”的方法,该方法将列表从尾部横向到头部,但是当我运行代码时,它出现说(第 88 行)它找不到光标 = cusor.prev;象征。我需要在循环中再次设置上一个链接
给定像 Uint8Array 这样的类型化数组,似乎有两种方法可以通过 worker 传输它们。 选项 1 直接发送缓冲区并在接收端进行转换: 发件人:postMessage({fooBuffer:
在 PHP + jQuery 环境中,我和我的 friend 无法得出最佳解决方案。我们正在使用 Ajax 从数据库中获取数据。 解决方案 1 - Ajax 应该只传输数据,而不是 HTML 好处:我
大家好,非常感谢您的宝贵时间。 有一个 std::stringstream 需要传输到远程机器。网络库允许我用以下方法构建数据包: CreatePacket( const void * DATA, s
我正在使用 libcurl 通过 FTP 传输二进制文件 (.exe),并将其保存到本地文件。问题是文件传输后,它已被更改,不再是有效的 Win32 应用程序,因此无法运行。这是我的做法: CURL
各位程序员, 当我将它上传到我的 FTP 时,我的网站出现此错误:资源被解释为样式表,但使用 MIME 类型文本/纯文本传输 BlahBlahi
我是一名优秀的程序员,十分优秀!