javascript - 如何在 WebRTC 中将多个轨道添加到对等连接？

Question

我希望仅使用一个 RTCPeerConnection 发送两个视频流(一个视频流和一个从 canvas HTML 元素捕获的流)。

我尝试做的是在提供之前将 addTrack 都跟踪到对等连接对象，但它在 Firefox 中不起作用(它在 Chrome 中起作用)。 peerConnection.ontrack 事件只发生一次，第一个轨道添加到对等连接对象(尽管有两个流)。

我已阅读有关重新协商的内容，但我目前在发送要约之前将两条轨道都添加到对等连接中，因此我不知道是否需要重新协商。我需要吗？

我还听说过 Firefox(统一计划)和 Chrome(计划 B)之间的多流互操作性问题，所以请告诉我现在应该采取什么方法。

我正在使用 adapter.js。

添加代码(实际上是javascript):

function createPeerConnection() {
    peerConnection = new RTCPeerConnection(iceServers);

    peerConnection.onicecandidate = (event) => {
        if (event.candidate) {
            // send to server
        }
    };

    videoStream.getTracks().forEach(track => peerConnection.addTrack(track, videoStream));
    canvasStream.getTracks().forEach(track => peerConnection.addTrack(track, canvasStream));
}

这就是我创建 RTCPeerConnection 和添加轨道的方式。在这部分创建报价并发送到信令服务器之后......一切正常，只是另一端只收到添加的第一首轨道(在 Firefox 中)。如果您需要这些位，我会添加它们。

这是轨道上的事件处理程序。

    peerConnection.ontrack = (event) => {
        console.log(event); //only prints the first track in Firefox, but prints both tracks in Chrome
    };

Answer 1

尝试在 Chrome 中启用统一计划支持。这仍在进行中，并在标志后面(在 chrome://flags 上启用实验性网络平台功能)。然后你需要构建你的 RTCPeerConnection
新的 RTCPeerConnection({sdpSemantics:'统一计划'})