个人中心
文章发布
退出
作者热门文章
- c - 在位数组中找到第一个零
- linux - Unix 显示有关匹配两种模式之一的文件的信息
- 正则表达式替换多个文件
- linux - 隐藏来自 xtrace 的命令
25
4
我有很大的 CT 原始数据文件，最大可以超过 20 到 30GB。对于我们部门当前的大多数计算机，我们最多只有 3GB。但是为了处理数据，我们需要遍历所有可用数据。当然，我们可以通过读取和写入函数顺序遍历数据来做到这一点。但有时需要在内存中保留一些数据。
目前我有自己的内存管理，我在其中创建了一个所谓的 MappableObject。每个原始数据文件包含 20000 个结构，每个结构显示不同的数据。每个 MappableObject 都指向文件中的一个位置。
在 C# 中，我创建了一个部分工作的机制，它会在必要时自动 mps 和取消映射数据。多年前我就知道 MemoryMappedFiles，但在 .NET 3.5 中我拒绝使用它，因为我知道在 .NET 4.0 中它将在 native 可用。
所以今天我尝试了 MemoryMappedFiles，发现无法分配所需的内存。如果我有一个 32 位系统，并且我想分配 20GB，由于超出了逻辑地址空间的大小，它不起作用。这对我来说很清楚。
但是有没有办法像我这样处理这么大的文件呢？我还有什么机会？你们是怎么解决这些问题的？
谢谢马丁
最佳答案
我知道的唯一限制是您可以映射的文件的最大 View 的大小，它受地址空间的限制。内存映射文件可以大于地址空间。 Windows 需要在进程地址空间的连续 block 中映射文件 View ，因此最大映射的大小等于地址空间的最大空闲 block 的大小。文件系统本身对总文件大小的唯一限制。
关于c# - 内存映射文件 : How much memory can be allocated for files，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/5518084/
25
4
0
N3485 20.6.9.1 [allocator.members]/1 说: Calls to these functions that allocate or deallocate a parti
我想编写一个调用 createHook() 的自定义分配器在对象构造和对称之后 destroyHook()就在对象销毁之前。我以这种方式使用我的分配器: class Object {}; class
我正在用 C++ 重新创建一个链表，并且在重载 += 运算符时得到了一个错误的指针。我想我只是以错误的方式使用了分配器，但我可能是错的。 这里是上下文: void MyLinkedList::oper
Allocator concept和 std::allocator_traits没有说明 allocate 是否会抛出。 所以当我使用分配器编写容器时，如何知道是检查返回类型还是使用 catch？ 最
C++20 删除了 construct()和 destruct()成员(member)来自 std::allocator .我应该如何构造通过 std::allocator::allocate() 分
这个问题听起来可能相当初级，但这是我与另一位合作开发人员的辩论。 我注意在可能的地方分配堆栈，而不是堆分配它们。他在和我说话并看着我的肩膀并评论说没有必要，因为他们在表现方面是一样的。 我一直认为堆栈
这个问题听起来可能相当初级，但这是我与另一位合作开发者的争论。 我一直在尽可能地堆栈分配东西，而不是堆分配它们。他一边跟我说话，一边看着我，并评论说没有必要，因为它们在性能方面是相同的。 我一直认为堆
在 Java 程序中，当需要分配数千个相似大小的对象时，最好(在我看来)有一个“池”(这是一个单一的分配)，其中包含可以从中提取的保留项目需要的时候。这个单一的大分配不会像数千个较小的分配那样使堆碎片
我正在尝试使用 TBB 来提升使用 OpenCV 的计算机视觉项目的性能。这是代码中给出访问冲突的部分。 #include #include "opencv2/objdetect/objdetect
我对一个问题有疑问，特别是关于 this 的问题回答。 有一部分留给读者作为练习(这本身不是问题)，特别是 Jonathan Wakely(答案的作者)说: This code asserts tha
Allocator concept和 std::allocator_traits不要说当分配失败时 allocate 会做什么——它会返回 nullptr 还是抛出异常？ 当我使用标准分配器 API
我有充分的理由不应该做这样的事情吗？示例: 我有一个类(class)MyClass。在那里我有这个实现: - (id)copyWithZone:(NSZone*)zone { MyClass
相关但不重复:请参阅此答案的底部，在单击此问题下方的“关闭”按钮之前，我解决了您可能想要声明的重复项。 自动生成 ROS (Robot Operating System) message C++ 头文
据我所知std::allocator::construct在旧版本的 C++ 上仅需要两个参数；第一个是指向原始的、未构造的内存的指针，我们要在其中构造 T 类型的对象。第二个是用于初始化该对象的元素
40个不同的分配函数给40个不同的调用点 void f00(size_t sz) { void* ptr = malloc(sz); free(ptr); } void f01(size_t sz)
我在使用 RenderScript 时一直遇到内存管理问题，所以我认为由于 Allocation.createFromBitmap()/createTyped() 消耗内存，Allocation.de
我正在尝试使用 valgrind 跟踪段错误。我从 valgrind 收到以下消息: ==3683== Conditional jump or move depends on uninitialise
实际上，我正在尝试创建一个包含 n 个多媒体文件(包括图像和视频)的应用程序。我的应用程序大小约为 34MB，我的 Assets 大小约为 60mb。当我在普通设备上加载应用程序时，我们没有遇到任何问
STL 容器有一个模板参数可以选择自定义分配器。花了一段时间，但我想我明白它是如何工作的。不知何故，它并不是很好，因为给定的分配器类型没有直接使用，而是反弹到另一种类型的分配器。我终于可以使用它了。
new int[0]在 C++ 中是允许的，但 std::allocator().allocate(0)定义好？ 更一般地说，所有分配器都必须接受 0作为参数分配？ 编辑: 阅读答案后，我测试了 Vi
我是一名优秀的程序员,十分优秀！