gpt4 book ai didi

http - 从 decklink 卡流式传输到浏览器的解决方案(Gstreamer -> TCP MJPEG ->?)

转载 作者:可可西里 更新时间:2023-11-01 15:20:45 30 4
gpt4 key购买 nike

我需要从 decklink 卡向浏览器直播。我还必须能够在非常差的网络链接(128kbits/s...)下完成此操作,因此我需要能够以非常低的 fps(1 fps 就可以)和非常低的图像质量进行流式传输。

目前我正在使用 GStreamer 从卡中获取视频,将其转码为 MJPEG,并使用 TCP 进行流式传输。这部分工作正常,但现在我需要将此 tcp 流传输到 HTTP 流。

我可以用 VLC 做到这一点,它在“正常”帧速率(15 fps -> 0.5 秒延迟)下运行良好。但是,如果我为 VLC 提供 1 fps 的流,它会引入大约 11 秒的延迟,这对我的目的来说并不合适。

所以,现在我正在寻找 VLC 的替代品。我看到了 3 种方法:

  • 使用 GStreamer 的 souphttpclientsink 流式传输到 HTTP 流服务器

  • 创建我自己的 HTTP 服务器,用于监听 TCP 流并将其重新流式传输到客户端。我在 Python 和 Node.js 中尝试过,它几乎可以正常工作,但我更希望有一个像以前那样更健壮的解决方案

  • 更棘手:创建我自己的 HTTP 服务器,监听 TCP 流并使用 websockets 将数据发送到客户端,然后解码然后流式传输客户端...

那么,我的问题是:

  • 您知道哪些 HTTP 流服务器(如果可能的话是免费的)可与 souphttpclientsink(或 tcpclientsink)一起使用吗?

  • 您还有其他想法可以将 GStreamer 流传输到浏览器吗?

感谢阅读!

最佳答案

由于节点 Dicer 模块(并感谢 this post 上的 mscdex),我使 websockets 解决方案正常工作。

这就是我所做的:

1°) 使用 GStreamer 通过 TCP 流式传输我的 Decklink 卡的视频:

gst-launch -v decklinksrc mode=10 connection=0 ! deinterlace ! videorate ! videoscale ! video/x-raw-yuv, framerate=1/5, width=256, height=144 ! jpegenc quality=20 ! multipartmux  boundary="--videoboundary" ! tcpserversink host=<TCP src stream IP address> port=<TCP src stream port>

2°) 使用 Node 收听此流并通过 socket.io 发送每个图像:

// ------------------------------------------------
// Constants :
// ------------------------------------------------

var srcHost = "<TCP src stream IP address>";
var srcPort = <TCP src stream port>
var srcBoundary = "--videoboundary";

var destHost = "<dest IP address>";
var destPort = <dest port>;

// ------------------------------------------------
// ------------------------------------------------
// ------------------------------------------------



// ------------------------------------------------
// Includes :
// ------------------------------------------------
var Http = require('http');
var Net = require('net');
var Dicer = require('dicer');
var SocketIO = require('socket.io');
// ------------------------------------------------
// ------------------------------------------------
// ------------------------------------------------



// ------------------------------------------------
// TCP socket :
// ------------------------------------------------

var socket = Net.Socket();

socket.connect(srcPort, srcHost, function() {

// Init socket IO :
var io = SocketIO.listen(Http.createServer().listen(destPort, destHost), { log: false });

// Init Dicer :
var dicer = new Dicer({ boundary: srcBoundary });

dicer.on('part', function(part) {

var frameEncoded = '';
part.setEncoding('base64');

part.on('header', function(header) { });
part.on('data', function(data) { frameEncoded += data; });
part.on('end', function() { io.sockets.emit('image', frameEncoded); });
});

// Handle streams closing :
dicer.on('finish', function() { console.log('Dicer stream finished'); });
socket.on('close', function() { console.log('TCP socket closed'); });

// Pipe :
socket.pipe(dicer);
});
// ------------------------------------------------
// ------------------------------------------------
// ------------------------------------------------

3°) 在客户端监听 websocket :

<html>
<head>

<script src="jquery-1.9.1.js"></script>
<script src="socket.io-client/socket.io.min.js"></script>

<script>
var socket = io.connect('http://<dest IP address>:<dest port>');
socket.on('image', function (data) {

$("#video").attr("src", "data:image/jpeg;base64," + data.toString("base64") );
});
</script>
</head>

<body>

<img id="video" style="display:block; width:400px; height:auto;" src="" />

</body>
</html>

如果其他解决方案有效(但我可能会选择这个),我会更新这篇文章。

关于http - 从 decklink 卡流式传输到浏览器的解决方案(Gstreamer -> TCP MJPEG ->?),我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/23359736/

30 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com