1. 项目概述为什么需要预留内存在Linux系统开发或者嵌入式设备调试的过程中我们经常会遇到一个棘手的问题某些特定的硬件设备比如一个专用的图像处理单元、一个高速的网卡或者一个自定义的FPGA加速卡它们对内存访问有特殊的要求。这些要求可能包括内存必须是物理上连续的、不能被系统的内存管理单元MMU换出、或者必须位于特定的物理地址范围内。如果让Linux内核像管理普通内存一样去管理这些区域很可能会导致设备驱动无法正常工作甚至引发系统崩溃。这时候“内存预留”技术就派上用场了。它的核心思想很简单在系统启动的早期就告诉内核“嘿从物理内存里划出这么一块地儿别动它留给我的特殊设备用。” 这样内核在初始化自身的内存管理数据结构时就会主动避开这块区域确保它不会被分配给任何进程或内核自身使用。对于刚接触底层系统开发的朋友来说理解并掌握通过内核启动参数来预留内存是迈向系统定制和驱动开发的关键一步。这不仅仅是加一行参数那么简单它涉及到你对系统启动流程、内存布局和硬件交互的深刻理解。2. 内存预留的核心原理与参数解析2.1 内核启动参数的作用机制Linux内核启动参数通常是通过引导程序如GRUB、U-Boot的cmdline传递给内核的一串文本。内核在初始化的早期阶段会解析这串文本并根据其中的关键字来配置各种子系统。内存相关的参数在其中扮演着至关重要的角色因为它们决定了内核如何看待和利用机器上宝贵的物理内存资源。系统加电后BIOS或UEFI会先进行硬件自检并将探测到的物理内存信息地址范围、类型等以某种数据结构如E820图的形式存下来。引导程序加载内核时会把这个内存布局信息也一并传递过去。内核启动后首先会根据这些原始信息建立一个物理内存的“地图”。而我们在cmdline中添加的内存预留参数就是在这张地图上“插上小旗子”标记出哪些区域是“禁区”。2.2mem与memmap参数详解实现内存预留主要依靠两个内核参数mem和memmap。它们通常需要配合使用以达到精确控制的目的。mem参数这个参数用于限制内核可用的内存总量。它的语法是memnn[KMG]。例如mem768M告诉内核“你最多只能使用前768MB的物理内存。” 这是一个全局性的、粗暴的裁剪。它通常不是用来预留高端内存而是用来在内存很大的系统上人为制造一个“小内存”环境进行测试或者与memmap参数配合为预留区域“让出”地址空间。注意mem参数指定的内存范围是从物理地址0开始的连续区域。如果你有一块4GB内存的电脑设置mem2G那么内核就只会使用0~2GB的地址空间2GB~4GB的部分内核根本不会去触及。memmap参数这是实现精确内存预留的主力军。它的语法相对灵活memmapnn[KMG]$ss[KMG]。nn[KMG]: 指定要预留的内存块大小比如64M、1G。$ss[KMG]: 指定要预留的内存块的起始物理地址比如0x10000000256MB处。例如memmap128M$0x20000000表示“从物理地址512MB0x20000000开始预留128MB的内存”。更常见的用法是与mem参数联用来预留高端内存。假设系统有1GB物理内存0x00000000 ~ 0x40000000我们想把最后128MB896MB ~ 1GB预留出来。可以这样设置mem896M memmap128M$896M这里的逻辑是mem896M告诉内核你只管0~896MB这块地。memmap128M$896M同时告诉内核在896MB开始的地方有128MB是我要预留的。 由于这128MB区域已经在mem限定的范围之外内核在初始化时根本不会去扫描和管理这片区域从而完美实现了预留。这种“ exclusion”方式是最干净、最可靠的。2.3 其他相关参数与reserved-memory节点除了上述传统参数现代Linux内核特别是与设备树DTB配合的嵌入式体系结构更推荐使用设备树中的reserved-memory节点来声明预留内存。这种方式更结构化也能与特定的设备驱动绑定。不过通过内核命令行参数的方式具有通用性强、无需重新编译设备树、动态可调的优势在x86 PC和很多场景下依然是首选。另外还有一个reservelow参数用于预留低端内存最初几MB主要用于一些古老的ISA设备DMA现在已较少使用。3. 实操步骤从查询到验证3.1 第一步确定系统当前内存布局在动手修改之前我们必须先摸清家底系统的物理内存到底是怎么分布的有没有已经被硬件或固件占用的区域方法一查看内核启动日志最直接的方法是查看内核启动时打印的信息。使用dmesg命令并过滤关键词sudo dmesg | grep -E “BIOS-e820|E820|reserve|RAM”你会看到类似下面的输出[ 0.000000] BIOS-e820: [mem 0x0000000000000000-0x000000000009fbff] usable [ 0.000000] BIOS-e820: [mem 0x000000000009fc00-0x000000000009ffff] reserved [ 0.000000] BIOS-e820: [mem 0x00000000000f0000-0x00000000000fffff] reserved [ 0.000000] BIOS-e820: [mem 0x0000000000100000-0x00000000bffdffff] usable [ 0.000000] BIOS-e820: [mem 0x00000000bffe0000-0x00000000bfffffff] reserved [ 0.000000] BIOS-e820: [mem 0x00000000feffc000-0x00000000feffffff] reserved [ 0.000000] BIOS-e820: [mem 0x00000000fffc0000-0x00000000ffffffff] reserved这里列出了所有内存区域“usable”是可用的“reserved”是已被预留的可能是给显卡、BIOS等。你需要找到一大段连续的“usable”区域作为预留的目标。方法二查看/proc/iomem这个虚拟文件以更清晰的方式展示了系统所有物理地址空间的分配情况。sudo cat /proc/iomem输出中“System RAM”条目就是可用的内存区域。记下它们的起始和结束地址。3.2 第二步规划预留区域假设通过上一步我们查到系统有0~4GB的物理内存其中0~3GB是可用系统内存。我们想从3GB0xB0000000开始预留256MB0x10000000给一个设备。关键计算预留起始地址3GB 3 * 1024 * 1024 * 1024 3221225472 (十进制) 0xB0000000 (十六进制)预留大小256MB 256 * 1024 * 1024 268435456 (十进制) 0x10000000 (十六进制)mem参数值为了让内核不管理预留区之后的内存我们需要将可用内存上限设为预留起始地址。即mem3072M(因为 3GB 3072MB)。更精确的我们可以使用mem3072M。因此我们的内核参数组合规划为mem3072M memmap256M$3G注意$3G是内核参数解析器支持的一种简写等同于$0xB0000000。使用G/M后缀比直接写十六进制更不易出错。3.3 第三步修改GRUB引导配置在大多数Linux发行版上我们通过修改GRUB配置来添加内核参数。编辑GRUB配置文件sudo vim /etc/default/grub找到以GRUB_CMDLINE_LINUX_DEFAULT或GRUB_CMDLINE_LINUX开头的行。它可能看起来像这样GRUB_CMDLINE_LINUX_DEFAULT“quiet splash”添加参数在引号内的现有参数后面加上我们规划好的参数。务必确保原有参数不变。GRUB_CMDLINE_LINUX_DEFAULT“quiet splash mem3072M memmap256M\$3G”重要提示在/etc/default/grub文件中$符号有特殊含义变量引用。为了让它原样传递给内核必须在它前面加上反斜杠\进行转义即写成\$3G。这是最容易踩坑的地方之一很多人在此步骤后发现参数未生效八成是因为$没转义。更新GRUB配置保存文件后运行以下命令使更改生效。不同发行版命令可能不同。对于使用grub的系统如Ubuntu, Debiansudo update-grub对于使用grub2的系统如CentOS, RHEL, Fedorasudo grub2-mkconfig -o /boot/grub2/grub.cfg3.4 第四步重启并验证预留效果重启系统后我们需要从多个角度验证预留是否成功。验证一查看内核命令行首先确认参数是否正确加载cat /proc/cmdline输出中应该包含mem3072M memmap256M$3G注意此时看到的$前没有反斜杠说明转义正确且已被内核接收。验证二查看内核启动信息再次使用dmesg查找与内存预留相关的信息sudo dmesg | grep -i “reserve\|memmap”你可能会看到类似这样的信息表明内核确实识别了你的预留请求[ 0.000000] Command line: ... mem3072M memmap256M$3G ... [ 0.000000] BIOS-provided physical RAM map: ... [ 0.000000] user: [mem 0x00000000b0000000-0x00000000bfffffff] reserved“user”字样明确指出了这是一块由用户通过命令行预留的内存。验证三查看系统可用内存使用free -h或cat /proc/meminfo查看系统总内存。如果预留成功MemTotal应该接近3072MB约3GB而不是原来的4GB。这是最直观的证明。free -h输出中total一列应该显示类似2.9G因为会略小于3072M有些内存被内核固定占用。验证四检查预留区域是否可访问对于驱动开发者最终极的验证是尝试在驱动中映射并使用这块内存。一个简单的测试方法是如果预留的内存是给一个字符设备编写一个小的内核模块尝试用ioremap或memremap函数去映射预留的物理地址。如果映射成功并能读写说明预留完全正确。如果映射失败返回NULL或者访问时导致内核Oops则说明预留可能有问题或者地址冲突。4. 常见问题、排查技巧与高级用法4.1 参数未生效的排查思路检查GRUB更新命令是否运行了update-grub或grub2-mkconfig命令是否成功执行最好检查一下生成的/boot/grub/grub.cfg文件搜索你的内核命令行看参数是否存在且格式正确。检查$转义这是最高频的错误。确保在/etc/default/grub中是\$而在/proc/cmdline中看到的是$。地址冲突你预留的地址范围是否与BIOS-e820中标记为“reserved”的区域重叠如果重叠内核可能会忽略你的参数或者导致不可预知的行为。务必确保预留区域落在“usable”的范围内。语法错误确保memmap参数中大小和地址之间没有空格且单位正确。memmap256M$3G是正确的memmap256M $3G有空格可能就是错误的。内核不支持极少数情况下内核可能编译时未包含CONFIG_CMDLINE的相关支持。但标准桌面发行版内核通常都支持。4.2 预留多块不连续内存memmap参数支持以逗号分隔指定多块预留区域。例如mem3072M memmap128M$2G,256M$3G这个参数告诉内核总内存限制在3GB同时预留两块内存一块是从2GB开始的128MB另一块是从3GB开始的256MB。注意第二块256M的起始地址3GB0xC0000000已经超出了mem3072M0xC0000000的范围所以它会被完全排除在外。4.3 为特定设备驱动预留内存仅仅把内存预留出来内核不管了这还不够。你的设备驱动需要知道这块内存的存在并能够访问它。这通常有两种方式驱动中硬编码在驱动代码里直接使用ioremap或devm_memremap等函数映射你在启动参数中预留的物理地址。这种方式简单直接但缺乏灵活性地址一变就需要重新编译驱动。结合设备树或平台数据更优雅的方式是在设备树Device Tree中描述你的设备并在其节点中通过memory-region属性引用一个reserved-memory节点。这样驱动可以通过通用接口如of_reserved_mem_lookup动态获取预留内存的信息。虽然我们通过memmap参数预留了内存我们也可以在设备树中如果使用DTB声明一个同样范围的reserved-memory节点并指定它的no-map属性然后让设备节点引用它。这样既保证了内存不被系统占用又为驱动提供了标准的查找接口。4.4 动态预留与释放的思考通过启动参数预留是静态的、一次性的。一旦系统启动这块内存就对内核完全“隐身”了。如果你希望内存能在系统运行时动态地预留和释放就需要更复杂的机制比如CMA连续内存分配器这是内核的一个子系统它预留一大块内存平时允许内核使用但当特定设备如GPU需要大块连续物理内存时可以快速腾出来。这需要通过内核配置CONFIG_CMA并传递cma启动参数来实现。内核模块编写一个内核模块在模块初始化时调用memblock_reserve或request_mem_region等函数来动态预留内存。但这要求模块加载得非常早且操作需要格外小心。对于绝大多数“为特定硬件预留专属内存”的场景静态的启动参数预留方式因其简单、可靠、确定性强的特点仍然是首选方案。它把问题在系统初始化最早的时刻就解决了避免了后续内存碎片化带来的复杂性问题。理解并熟练运用mem和memmap这两个参数是你深入Linux系统底层开发的必备技能。下次当你需要为那块特殊的硬件卡保留一片“自留地”时就知道该如何下手了。