c# - 使用 ffmpeg、node.js 和 socket.io 将 Flv 流式传输到套接字

Question

所以我在理解如何解决这个问题上遇到了一些问题。我知道流媒体视频是一个很难的话题，并且有很多需要考虑的因素，但无论如何我们要开始学习如何流媒体视频。

我正在使用 SocketIoClientDotNet作为 c# 应用程序的 node.js 客户端。

我正在将视频的字节数组发送到正在创建临时文件并将缓冲区附加到它的 Node 。我试图将视频元素的源设置为该文件，但它不会将其读取为视频并且都是黑色的。我试图下载该文件的副本，因为它不起作用，结果 vlc 也无法播放。好的代码:

C#

bool ffWorkerIsWorking = false;
private void btnFFMpeg_Click(object sender, RoutedEventArgs e)
{
    BackgroundWorker ffWorker = new BackgroundWorker();
    ffWorker.WorkerSupportsCancellation = true;
    ffWorker.DoWork += ((ffWorkerObj,ffWorkerEventArgs) =>
    {
        ffWorkerIsWorking = true;
        using (var FFProcess = new Process())
        {
            var processStartInfo = new ProcessStartInfo
            {
                FileName = "ffmpeg.exe",
                RedirectStandardInput = true,
                RedirectStandardOutput = true,
                UseShellExecute = false,
                CreateNoWindow = true,
                Arguments = " -loglevel panic -hide_banner -y -f gdigrab -draw_mouse 1 -i desktop -f flv -"
            };
            FFProcess.StartInfo = processStartInfo;
            FFProcess.Start();
            byte[] buffer = new byte[32768];
            using (MemoryStream ms = new MemoryStream())
            {
                while (!FFProcess.HasExited)
                {
                    int read = FFProcess.StandardOutput.BaseStream.Read(buffer, 0, buffer.Length);
                    if (read <= 0)
                        break;
                    ms.Write(buffer, 0, read);
                    clientSocket.Emit("video", ms.ToArray());
                    ms.Flush();
                    if (!ffWorkerIsWorking)
                    {
                        ffWorker.CancelAsync();
                        break;
                    }
                }
            }
        }
    });
    ffWorker.RunWorkerAsync();
}

JS(服务器)

var buffer = new Buffer(32768);
var isBuffering = false;
var wstream;
socket.on('video', function(data) {
    if(!isBuffering){
        wstream = fs.createWriteStream('fooTest.flv');
        isBuffering = true;
    }
    buffer = Buffer.concat([buffer, data]);
    fs.appendFile('public/fooTest.flv', buffer, function (err) {
      if (err) throw err;
      console.log('The "data to append" was appended to file!');
    });
});

我在这里做错了什么？

Answer 1

与 OutputDataReceived捕获 text 的事件进程标准输出的输出。这就是为什么在第一种情况下服务器提示 UTF-8 编码。您的第二个示例有效，因为您正在发送二进制流。

您需要捕获二进制基本流。请参阅此答案以了解如何操作:Capturing binary output from Process.StandardOutput

我不知道您打算如何准确地进行流式传输，但是如果您使用 FLV，那么已经有可以使用的 HTTP/RTMP 服务器(例如带有 RTMP 模块的 Nginx)。