- r - 以节省内存的方式增长 data.frame
- ruby-on-rails - ruby/ruby on rails 内存泄漏检测
- android - 无法解析导入android.support.v7.app
- UNIX 域套接字与共享内存(映射文件)
我有一个 2GB 内存的设置,我想将 1GB(或更多)物理内存映射到用户空间虚拟地址。这在理论上是可能的,因为使用 32 位设置,3GB 的虚拟地址可供用户陆地应用程序使用。
我用以下参数更新了内核命令行:mem=1G memmap=1G$1G
强制内核查看 1GB RAM 并保留最后 1GB。
我有我的自定义驱动程序,它将处理用户空间 mmap()
调用并使用函数 remap_pfn_range()
将物理地址 0x40000000 (1G) 映射到用户空间地址>.
但是函数在remap_pte_range()
中触发了一个内核BUG()。同一调用过去使用 300MB 重映射而不是 1GB。
我通常在驱动程序中调用ioremap()
将物理地址映射到内核虚拟地址。在这种情况下,我不能因为 1G/3G 虚拟地址拆分(1G 用于内核,3G 用于应用程序)。所以我想知道是否可以将物理地址映射到用户空间虚拟地址而不在内核中映射这些物理地址?
这是一个 32 位 x86 内核,即“i386”架构。
最佳答案
为什么你的remap_pfn_range调用会触发内核BUG()
根据 here 在 remap_pfn_range
中调用 BUG_ON
宏
2277 BUG_ON(addr >= end);
remap_pfn_range
调用 remap_pud_range
,后者调用 remap_pmd_range
,后者调用 remap_pte_range
。
随后从 remap_pmd_range
调用 BUG_ON
或 VM_BUG_ON
here
2191 VM_BUG_ON(pmd_trans_huge(*pmd));
来自remap_pte_range
here
2171 BUG_ON(!pte_none(*pte));
BUG_ON
宏已定义 here
作为
#define BUG_ON(condition) 做 { if (unlikely(condition)) BUG(); } while(0)
上面定义了BUG
宏it打印消息并 panic 。
不太可能
定义了宏 here
as # define unlikely(x) (__builtin_expect(!!(x), 0))
。
所以当目标用户地址开始于addr
大于等于end
时定义为end = addr + PAGE_ALIGN(size);
,BUG_ON返回1,调用BUG。
或者当 pmd_trans_huge
定义为 here
153 #ifdef CONFIG_TRANSPARENT_HUGEPAGE
154 static inline int pmd_trans_splitting(pmd_t pmd)
155 {
156 return pmd_val(pmd) & _PAGE_SPLITTING;
157 }
158
159 static inline int pmd_trans_huge(pmd_t pmd)
160 {
161 return pmd_val(pmd) & _PAGE_PSE;
162 }
163
164 static inline int has_transparent_hugepage(void)
165 {
166 return cpu_has_pse;
167 }
返回 0,当内核中没有配置 CONFIG_TRANSPARENT_HUGEPAGE 或者如果pmd
(页面元数据)值或 & _PAGE_PSE
或者当pte_none
对应的条目不存在时返回1,存在时返回0。
因此 !pte_none
在相应的页表条目不存在时返回 0,否则返回 1 作为传递给 BUG_ON
的条件。
如果页表条目已经存在,则会调用 BUG
宏。
如果您指定的内存量小于 !GB 且大于 300MB,比如 500MB 或 800MB,会发生什么情况?
所以要么你的起始地址大于你的结束地址,要么你的 CONFIG_TRANSPARENT_HUGEPAGE
没有在内核中配置,或者你指的是页面元数据不存在或页表条目已经存在.
从评论中澄清,您对 remap_pfn_range
的调用引用了已经指向页表条目或 pte
*pte
.
这意味着 set_pte_at(mm, addr, pte, pte_mkspecial(pfn_pte(pfn, prot)));
会失败,因为 pte 指针已经指向页表条目,因此不能设置为 pte
即 pte_mkspecial(pfn_pte(pfn, prot))
。
绕过1G/3G虚拟地址分割
请参阅以下文章 High Memory In The Linux Kernel
请参阅以下邮件列表 post ,其中讨论了一些关于至少 1GB RAM 的 HIGHMEM 的附加信息。
关于将内核和非内核虚拟地址空间映射到用户空间的信息
将内核虚拟地址和非内核(由 vmalloc() 返回)虚拟地址映射到用户空间的一种方法是使用 remap_pfn_range
。参见 Linux Memory Mapping了解更多信息。
在旧内核上替代 nopage 处理程序的另一种方法是 vm_insert_page
函数
其他资源包括:
关于c - 如何在 32 位 Linux 内核下映射 1GB(或更多)的物理内存,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/9638035/
#include typedef std::vector vc; typedef std::vector vvc; vvc f() { const int N = (1 不把它还给操作系统。 因
我正在尝试训练 Dlib's train_shape_predictor_ex.cpp与 Halen数据集。我在 Release模式 中使用 Visual Studio 将代码编译为 64 位平台 作
当我试图解决this 时想到了这个问题。问题。 我有一个容量为 120 GB 的硬盘,其中 100 GB 被一个巨大的文件占用。所以 20 GB 仍然是免费的。 我的问题是,我们如何将这个巨大的文件拆
这个问题在这里已经有了答案: 关闭 10 年前。 Possible Duplicate: Can you allocate a very large single chunk of memory (
我有一台运行 Linux (3.19.5-200.fc21.x86_64) 的 128 GB RAM 的计算机。但是,我不能在单个进程中分配超过 ~30 GB 的 RAM。除此之外,malloc 失败
我需要为 808704000 个 float 分配内存,大约是 3085 MB。我的电脑有 32 GB 内存,运行 64 位 Linux (CentOS 6.6)。每次我尝试分配内存时,malloc
很抱歉这个愚蠢的问题,但是当reading about 32 bits limitation ,我发现由于 Memory-Mapped 方法,MongoDB 不能存储超过 2 GB,但是: 2^32
假设我们有一个 32 位地址,那么每一位可以是 1 或 0。 所以组合总数等于2^32。 所以我们可以表示 2^32 个地址(没有单位)。 但为什么人们说 32 位地址可以表示 2^32 字节地址(为
好吧,这个问题确实是一个挑战! 背景 我正在从事一个涉及比正常数字更大的基于算术的项目。我是新手,我打算使用 4 GB 文件大小的最坏情况(我什至希望将其扩展到 5GB 上限,因为我之前看到文件大小大
我在文件系统上有大约 12 个大小为 1 GB 到 10 GB 的存储库,我需要为所有这些存储库设置自动备份(我们的旧备份脚本在计算机出现故障时丢失了) XP 64 位机器。 看完this quest
我尝试调整 Linux VM 上的操作系统磁盘大小,该 VM 通常由 azure 自动创建。我无法创建自定义操作系统磁盘 - 请告知我该怎么做? enter image description her
我在 .NET 中遇到了一个问题,我的数组受到我拥有的 RAM 数量的限制,并且我需要可以容纳至少 40 GB 字节的数组。我正在考虑使用硬盘驱动器作为虚拟数组的想法不在乎它是否慢。 我正在研究这个想
我尝试调整 Linux VM 上的操作系统磁盘大小,该 VM 通常由 azure 自动创建。我无法创建自定义操作系统磁盘 - 请告知我该怎么做? enter image description her
我的目标是看看当使用比物理 GPU 内存所能容纳的更多纹理数据时会发生什么。我的第一次尝试是加载多达 40 个 DDS 纹理,导致内存占用比 GPU 内存高得多。但是,我的场景在 9500 GT 上仍
Windows 上的 JDK 最多需要 2 GB 左右的 RAM。即使我们为 JDK 分配更多 RAM;它不接受它。如果我需要在 Windows 上运行需要 8 GB RAM 的进程;我怎样才能实现它
我有一个程序需要分配2个15亿长度的整数数组。这是一个编码挑战( https://projecteuler.net/problem=282 ),并且没有办法使用如此大的数组(如果有,请不要告诉我;我应
假设我有一个 32 位内核。 4 Gb RAM,10 Gb 交换分区。 我有一个在无限循环中有 malloc 的进程。因此,最终系统的 OOM 将终止该进程。这里有两个论点。 参数 1:因为它是 32
我有一个可以大于 4GB 的文件。我正在使用 linux split 命令按行拆分它(这是要求)。但是拆分原始文件后,我希望拆分文件的大小始终小于 2GB。原始文件大小可能在 3-5 GB 之间。我想
我有一台带有 32GB RAM 的 Mac 服务器(雪豹)。当我尝试在 Perl (v 5.10.0) 中分配超过 1.1GB 的 RAM 时,出现内存不足错误。这是我使用的脚本: #!/usr/bi
我们正在尝试运行.NET 4 Web应用程序(在8 GB,8核心Windows 2008 R2 64位Webedition服务器上),该应用程序使用Spire.doc创建Word mailmerge文
我是一名优秀的程序员,十分优秀!