- mongodb - 在 MongoDB mapreduce 中,如何展平值对象?
- javascript - 对象传播与 Object.assign
- html - 输入类型 ="submit"Vs 按钮标签它们可以互换吗?
- sql - 使用 MongoDB 而不是 MS SQL Server 的优缺点
假设我有一个无符号字符数组,代表一堆 POD 对象(例如,从套接字读取或通过 mmap 读取)。它们代表哪些类型以及在什么位置是在运行时确定的,但我们假设每个类型都已经正确对齐。
将这些字节“转换”为相应的 POD 类型的最佳方法是什么?
解决方案应该符合 c++ 标准(假设 >= c++11),或者至少保证可以使用 g++ >= 4.9、clang++ >= 3.5 和 MSVC >= 2015U3。编辑:在 linux、windows 上,在 x86/x64 或 32/64 位 arm 上运行。
理想情况下,我想做这样的事情:
uint8_t buffer[100]; //filled e.g. from network
switch(buffer[0]) {
case 0: process(*reinterpret_cast<Pod1*>(&buffer[4]); break;
case 1: process(*reinterpret_cast<Pod2*>(&buffer[8+buffer[1]*4]); break;
//...
}
或
switch(buffer[0]) {
case 0: {
auto* ptr = new(&buffer[4]) Pod1;
process(*ptr);
}break;
case 1: {
auto* ptr = new(&buffer[8+buffer[1]*4]) Pod2;
process(*ptr);
}break;
//...
}
两者似乎都有效,但两者都是 c++1) 中的 AFAIK 未定义行为。并且只是为了完整性:我知道“通常”的解决方案是将这些东西复制到适当的局部变量中:
Pod1 tmp;
std::copy_n(&buffer[4],sizeof(tmp), reinterpret_cast<uint8_t*>(&tmp));
process(tmp);
在某些情况下,在其他情况下它可能没有开销,在某些情况下它甚至可能更快,但除了性能之外,我不再可以,例如修改数据,老实说:知道我在内存中的适当位置有正确的位,但我就是不能使用它们,这让我很恼火。
我想出的一个有点疯狂的解决方案是:
template<class T>
T* inplace_cast(uint8_t* data) {
//checks omitted for brevity
T tmp;
std::memmove((uint8_t*)&tmp, data, sizeof(tmp));
auto ptr = new(data) T;
std::memmove(ptr, (uint8_t*)&tmp, sizeof(tmp));
return ptr;
}
g++ 和 clang++ 似乎能够优化掉那些拷贝,但我认为这会给优化器带来很大负担,并可能导致其他优化失败,不适用于 const uint8_t*
(虽然我不想实际修改它)而且看起来很糟糕(不要认为你会得到过去的代码审查)。
1) 第一个是 UB,因为它破坏了严格的别名,第二个可能是 UB ( discussed here ),因为标准只是说生成的对象没有初始化并且具有不确定的值(而不是保证底层内存不受影响)。我相信第一个等效的 c 代码定义良好,因此编译器可能会允许它与 c 头文件兼容,但我不确定。
最佳答案
最正确的方法是创建所需 POD 类的(临时)变量,并使用 memcpy()
将数据从缓冲区复制到该变量中:
switch(buffer[0]) {
case 0: {
Pod1 var;
std::memcpy(&var, &buffer[4], sizeof var);
process(var);
break;
}
case 1: {
Pod2 var;
std::memcpy(&var, &buffer[8 + buffer[1] * 4], sizeof var);
process(var);
break;
}
//...
}
这样做的主要原因是对齐问题:缓冲区中的数据可能未针对您使用的 POD 类型正确对齐。制作拷贝消除了这个问题。即使网络缓冲区不再可用,它也允许您继续使用该变量。
只有当您绝对确定数据正确对齐时,您才能使用您提供的第一个解决方案。
(如果你从网络读取数据,你应该首先检查数据是否有效,并且你不会在缓冲区之外读取数据。例如 &buffer[8 + buffer[1 ] * 4]
,您应该检查该地址的开头加上 Pod2 的大小不超过缓冲区长度。幸运的是,您使用的是 uint8_t
,否则您还必须检查 buffer[1]
是否为负数。)
关于c++ - 将字节数组转换为 POD,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/41016334/
美好的一天!我试图添加两个字节变量并注意到奇怪的结果。 byte valueA = 255; byte valueB = 1; byte valueC = (byte)(valueA + valueB
嗨,我是 swift 的新手,我正在尝试解码以 [Byte] 形式发回给我的字节数组?当我尝试使用 if let string = String(bytes: d, encoding: .utf8)
我正在使用 ipv4 和 ipv6 存储在 postgres 数据库中。 因为 ipv4 需要 32 位(4 字节)而 ipv6 需要 128(16 字节)位。那么为什么在 postgres 中 CI
我很好奇为什么 Go 不提供 []byte(*string) 方法。从性能的角度来看,[]byte(string) 不会复制输入参数并增加更多成本(尽管这看起来很奇怪,因为字符串是不可变的,为什么要复
我正在尝试为UDP实现Stop-and-Wait ARQ。根据停止等待约定,我在 0 和 1 之间切换 ACK。 正确的 ACK 定义为正确的序列号(0 或 1)AND消息长度。 以下片段是我的代码的
我在下面写了一些代码,目前我正在测试,所以代码中没有数据库查询。 下面的代码显示 if(filesize($filename) != 0) 总是转到 else,即使文件不是 0 字节而是 16 字节那
我使用 Apache poi 3.8 来读取 xls 文件,但出现异常: java.io.IOException: Unable to read entire header; 0 by
字典大小为 72 字节(根据 getsizeof(dict) 在字典上调用 .clear() 之后发生了什么,当新实例化的字典返回 240 字节时? 我知道一个简单的 dict 的起始大小为“8”,并
我目前正在努力创建一个函数,它接受两个 4 字节无符号整数,并返回一个 8 字节无符号长整数。我试图将我的工作基于 this research 描述的方法,但我的所有尝试都没有成功。我正在处理的具体输
看看这个简单的程序: #include using namespace std; int main() { unsigned int i=0x3f800000; float* p=(float*)(
我创建了自己的函数,将一个字符串转换为其等效的 BCD 格式的 bytes[]。然后我将此字节发送到 DataOutputStram (使用需要 byte[] 数组的写入方法)。问题出在数字字符串“8
此分配器将在具有静态内存的嵌入式系统中使用(即,没有可用的系统堆,因此“堆”将只是“char heap[4096]”) 周围似乎有很多“小型内存分配器”,但我正在寻找能够处理非常小的分配的一个。我说的
我将数据库脚本从 64 位系统传输到 32 位系统。当我执行脚本时,出现以下错误, Warning! The maximum key length is 900 bytes. The index 'U
想知道 128 字节 ext2 和 256 字节 ext3 文件系统之间的 inode 数据结构差异。 我一直在为 ext2、128 字节 inode 使用此引用:http://www.nongnu.
我试图理解使用 MD5 哈希作为 Cassandra key 在“内存/存储消耗”方面的含义: 我的内容(在 Java 中)的 MD5 哈希 = byte[] 长 16 个字节。 (16 字节来自维基
检查其他人是否也遇到类似问题。 shell脚本中的代码: ## Convert file into Unix format first. ## THIS is IMPORTANT. ###
我们有一个测量数据处理应用程序,目前所有数据都保存为 C++ float,这意味着在我们的 x86/Windows 平台上为 32 位/4 字节。 (32 位 Windows 应用程序)。 由于精度成
我读到在 Java 中 long 类型可以提升为 float 和 double ( http://www.javatpoint.com/method-overloading-in-java )。我想问
我有一个包含 n 个十进制元素的列表,其中每个元素都是两个字节长。 可以说: x = [9000 , 5000 , 2000 , 400] 这个想法是将每个元素拆分为 MSB 和 LSB 并将其存储在
我使用以下代码进行 AES-128 加密来编码一个 16 字节的 block ,但编码值的长度给出了 2 个 32 字节的 block 。我错过了什么吗? plainEnc = AES.enc
我是一名优秀的程序员,十分优秀!