c++ - 如何使用 Python protobuf 读取二进制 C++ protobuf 数据？

Question

Google protobuf 的 Python 版本只给了我们:

SerializeAsString()

C++ 版本为我们提供了两者:

SerializeToArray(...)
SerializeAsString()

我们正在以二进制格式写入我们的 C++ 文件，我们希望保持这种方式。也就是说，有没有一种方法可以将二进制数据读入 Python 并将其作为字符串进行解析？

这是正确的做法吗？

binary = get_binary_data()
binary_size = get_binary_size()

string = None
for i in range(len(binary_size)):
   string += i

message = new MyMessage()
message.ParseFromString(string)

更新:

这是一个新的例子，还有一个问题:

message_length = 512

file = open('foobars.bin', 'rb')

eof = False
while not eof:

    data = file.read(message_length)
    eof = not data

    if not eof:
        foo_bar = FooBar()
        foo_bar.ParseFromString(data)

当我们到达 foo_bar.ParseFromString(data) 行时，我得到这个错误:

Exception Type: DecodeError
Exception Value: Too many bytes when decoding varint.

更新 2:

事实证明，二进制数据上的填充会导致 protobuf 关闭；正如消息所暗示的那样，发送的字节太多(在这种情况下它指的是填充)。

此填充来自于在固定长度缓冲区上使用 C++ protobuf 函数 SerializeToArray。为了消除这种情况，我使用了这个临时代码:

message_length = 512

file = open('foobars.bin', 'rb')

eof = False
while not eof:

    data = file.read(message_length)
    eof = not data

    string = ''
    for i in range(0, len(data)):
        byte = data[i]
        if byte != '\xcc': # yuck!
            string += data[i]

    if not eof:
        foo_bar = FooBar()
        foo_bar.ParseFromString(string)

我认为这里存在设计缺陷。我将重新实现我的 C++ 代码，以便它将可变长度数组写入二进制文件。正如 protobuf 文档所建议的那样，我将在每条消息前加上它的二进制大小，以便我知道在使用 Python 打开文件时要读取多少内容。

Answer 1

我不是 Python 专家，但您可以将 file.read() 操作的结果传递给 message.ParseFromString(...) 而无需不得不构建一个新的字符串类型或任何东西。