node.js - 一起发送 JSON 和 blob

Question

我正在编写一个简单的流媒体服务。

A 浏览器 A 打开一个到服务器的 Web 套接字，然后另一个浏览器 B 打开一个到同一服务器的新套接字。

浏览器A通过其摄像头(MediaRecorder API)注册视频并将其发送到服务器。

服务器将此视频广播到其他连接的浏览器。

我有一个 Socket.IO 的工作版本，但我想用普通 JavaScript 来实现(Node.js 服务器上的 WebSocket.Server 和客户端上的 webSocket)。

这就是问题:

使用socket.io可以写这样的东西:

  this.socket.emit('broadcast', {
    stream: new Blob(stream, {'type': `video/webm${MEDIA_CHARSET}`}),
    from: {id: this.socket.id}
  });

Stream 来自 mediarecorder -> dataavailable 事件监听器

但是使用 native websocket，我无法发送嵌入到 JSON 对象中的 blob，因为 websocket 只能发送字符串或数组缓冲区。

我尝试了很多不同的方法来一起发送 JSON 和 blob，但没有任何效果。

有什么帮助吗？

是否可以在客户端仅使用 Engine.IO 来将消息与 blob 和 JSON 打包在一起？关于这种方式有什么想法吗？

Answer 1

有很多方法可以序列化数据以通过二进制 Web 套接字发送。我建议考虑 CBOR，它序列化为二进制并且还支持其中的二进制数据。

NPM 上有多个 CBOR 库可供选择。