欢迎您访问第A百科网

理解内存(上):虚拟内存和内存保护是什么?

862次浏览     发布时间:2024-02-20 11:14:54     编辑: 记得要让着本宝宝

计算机有五大组成部分,分别是:运算器、控制器、存储器、输入设备和输出设备。如果说计算机最重要的组件,是承担了运算器和控制器作用的 CPU,那内存就是我们第二重要的组件了。内存是五大组成部分里面的存储器,我们的指令和数据,都需要先加载到内存里面,才会被 CPU 拿去执行。

从程序装载到内存的过程。可以知道,在我们日常使用的 Linux 或者 Windows 操作系统下,程序并不能直接访问物理内存。

我们的内存需要被分成固定大小的页(Page),然后再通过虚拟内存地址(Virtual Address)到物理内存地址(Physical Address)的地址转换(Address Translation),才能到达实际存放数据的物理内存位置。而我们的程序看到的内存地址,都是虚拟内存地址。

既然如此,这些虚拟内存地址究竟是怎么转换成物理内存地址的呢?这一讲里,我们就来看一看。

简单页表

想要把虚拟内存地址,映射到物理内存地址,最直观的办法,就是来建一张映射表。这个映射表,能够实现虚拟内存里面的页,到物理内存里面的页的一一映射。这个映射表,在计算机里面,就叫作页表(Page Table)。

页表这个地址转换的办法,会把一个内存地址分成页号(Directory)和偏移量(Offset)两个部分。这么说太理论了,我以一个 32 位的内存地址为例,帮你理解这个概念。

其实,前面的高位,就是内存地址的页号。后面的低位,就是内存地址里面的偏移量。做地址转换的页表,只需要保留虚拟内存地址的页号和物理内存地址的页号之间的映射关系就可以了。同一个页里面的内存,在物理层面是连续的。以一个页的大小是 4K 比特(4KiB)为例,我们需要 20 位的高位,12 位的低位。

总结一下,对于一个内存地址转换,其实就是这样三个步骤:

  1. 把虚拟内存地址,切分成页号和偏移量的组合;
  2. 从页表里面,查询出虚拟页号,对应的物理页号;
  3. 直接拿物理页号,加上前面的偏移量,就得到了物理内存地址。

看起来这个逻辑似乎很简单,很容易理解,不过问题马上就来了。你能算一算,这样一个页表需要多大的空间吗?我们以 32 位的内存地址空间为例,你可以暂停一下,拿出纸笔算一算。

不知道你算出的数字是多少?32 位的内存地址空间,页表一共需要记录 2^20 个到物理页号的映射关系。这个存储关系,就好比一个 2^20 大小的数组。一个页号是完整的 32 位的 4 字节(Byte),这样一个页表就需要 4MB 的空间。听起来 4MB 的空间好像还不大啊,毕竟我们现在的内存至少也有 4GB,服务器上有个几十 GB 的内存和很正常。

不过,这个空间可不是只占用一份哦。我们每一个进程,都有属于自己独立的虚拟内存地址空间。这也就意味着,每一个进程都需要这样一个页表。不管我们这个进程,是个本身只有几 KB 大小的程序,还是需要几 GB 的内存空间,都需要这样一个页表。如果你用的是 Windows,你可以打开你自己电脑上的任务管理器看看,现在你的计算机里同时在跑多少个进程,用这样的方式,页表需要占用多大的内存。

这还只是 32 位的内存地址空间,现在大家用的内存,多半已经超过了 4GB,也已经用上了 64 位的计算机和操作系统。这样的话,用上面这个数组的数据结构来保存页面,内存占用就更大了。那么,我们有没有什么更好的解决办法呢?你可以先仔细思考一下。

多级页表

仔细想一想,我们其实没有必要存下这 2^20 个物理页表啊。大部分进程所占用的内存是有限的,需要的页也自然是很有限的。我们只需要去存那些用到的页之间的映射关系就好了。如果你对数据结构比较熟悉,你可能要说了,那我们是不是应该用哈希表(Hash Map)这样的数据结构呢?

很可惜你猜错了:)。在实践中,我们其实采用的是一种叫作多级页表(Multi-Level Page Table)的解决方案。这是为什么呢?为什么我们不用哈希表而用多级页表呢?别着急,听我慢慢跟你讲。

我们先来看一看,一个进程的内存地址空间是怎么分配的。在整个进程的内存地址空间,通常是“两头实、中间空”。在程序运行的时候,内存地址从顶部往下,不断分配占用的栈的空间。而堆的空间,内存地址则是从底部往上,是不断分配占用的。

所以,在一个实际的程序进程里面,虚拟内存占用的地址空间,通常是两段连续的空间。而不是完全散落的随机的内存地址。而多级页表,就特别适合这样的内存地址分布。

我们以一个 4 级的多级页表为例,来看一下。同样一个虚拟内存地址,偏移量的部分和上面简单页表一样不变,但是原先的页号部分,我们把它拆成四段,从高到低,分成 4 级到 1 级这样 4 个页表索引。

对应的,一个进程会有一个 4 级页表。我们先通过 4 级页表索引,找到 4 级页表里面对应的条目(Entry)。这个条目里存放的是一张 3 级页表所在的位置。4 级页面里面的每一个条目,都对应着一张 3 级页表,所以我们可能有多张 3 级页表。

找到对应这张 3 级页表之后,我们用 3 级索引去找到对应的 3 级索引的条目。3 级索引的条目再会指向一个 2 级页表。同样的,2 级页表里我们可以用 2 级索引指向一个 1 级页表。

而最后一层的 1 级页表里面的条目,对应的数据内容就是物理页号了。在拿到了物理页号之后,我们同样可以用“页号 + 偏移量”的方式,来获取最终的物理内存地址。

我们可能有很多张 1 级页表、2 级页表,乃至 3 级页表。但是,因为实际的虚拟内存空间通常是连续的,我们很可能只需要很少的 2 级页表,甚至只需要 1 张 3 级页表就够了。

事实上,多级页表就像一个多叉树的数据结构,所以我们常常称它为页表树(Page Table Tree)。因为虚拟内存地址分布的连续性,树的第一层节点的指针,很多就是空的,也就不需要有对应的子树了。所谓不需要子树,其实就是不需要对应的 2 级、3 级的页表。找到最终的物理页号,就好像通过一个特定的访问路径,走到树最底层的叶子节点。

以这样的分成 4 级的多级页表来看,每一级如果都用 5 个比特表示。那么每一张某 1 级的页表,只需要 2^5=32 个条目。如果每个条目还是 4 个字节,那么一共需要 128 个字节。而一个 1 级索引表,对应 32 个 4KiB 的也就是 16KB 的大小。一个填满的 2 级索引表,对应的就是 32 个 1 级索引表,也就是 512KB 的大小。

我们可以一起来测算一下,一个进程如果占用了 1MB 的内存空间,分成了 2 个 512KB 的连续空间。那么,它一共需要 2 个独立的、填满的 2 级索引表,也就意味着 64 个 1 级索引表,2 个独立的 3 级索引表,1 个 4 级索引表。一共需要 69 个索引表,每个 128 字节,大概就是 9KB 的空间。比起 4MB 来说,只有差不多 1/500。

不过,多级页表虽然节约了我们的存储空间,却带来了时间上的开销,所以它其实是一个“以时间换空间”的策略。原本我们进行一次地址转换,只需要访问一次内存就能找到物理页号,算出物理内存地址。但是,用了 4 级页表,我们就需要访问 4 次内存,才能找到物理页号了。

我们在前面两讲讲过,内存访问其实比 Cache 要慢很多。我们本来只是要做一个简单的地址转换,反而是一下子要多访问好多次内存。对于这个时间层面的性能损失,我们有没有什么更好的解决办法呢?那请你一定要关注下一讲的内容哦!

总结延伸

好了,这一讲的内容差不多了,我们来总结一下。

我们从最简单的进行虚拟页号一一映射的简单页表说起,仔细讲解了现在实际应用的多级页表。多级页表就像是一颗树。因为一个进程的内存地址相对集中和连续,所以采用这种页表树的方式,可以大大节省页表所需要的空间。而因为每个进程都需要一个独立的页表,这个空间的节省是非常可观的。

在优化页表的过程中,我们可以观察到,数组这样的紧凑的数据结构,以及树这样稀疏的数据结构,在时间复杂度和空间复杂度的差异。另外,纯粹理论软件的数据结构和硬件的设计也是高度相关的。

推荐阅读

对于虚拟内存的知识点,你可以再深入读一读《计算机组成与设计:硬件 / 软件接口》的第 5.7 章节。如果你觉得还不过瘾,可以进一步去读一读《What Every Programmer Should Know About Memory》的第 4 部分,也就是 Virtual Memory。

相关文章

银行卡状态异常是什么意思(银行卡长期没用转账取钱时,反馈状态异常是为什么?)

前几天有个小伙伴着急地问我,有个客户给他转了几万块钱,指定要转到某个银行卡,但这张卡很长时间没用了,到账后,想把钱转出来,银行反馈此卡状态异常,不可用,该怎么办?回答这个问题前,咱们先来看看,有哪些原因会导致银行反馈此卡状态‬异常‬持卡人连续三次或‬三次以上‬输错银行卡密码,银行卡会被冻结;司法冻结

2024-11-15 10:45

win7怎么进入bios设置教程(如何正确进入BIOS设置)

BIOS,即Basic Input/Output System,是计算机启动过程中不可或缺的重要程序。它负责初始化硬件设备、设置系统参数以及为操作系统的加载提供必要的支持。正确进入BIOS设置是计算机维护和管理的重要步骤,也是解决硬件问题、优化系统性能和实现个性化设置的关键环节。本文将详细介绍进入B

2024-11-15 10:31

自然之道主要内容(中国哲学基础概念:自然之道、理从欲见)

自然之道 明清之际朱之瑜提出的命题。他反对理学家“道在器先”的玄虚之“道”,提出“道无空名”,“道”是明明白白、平平常常的“现前道理”(《答安东守约书》)。认为“道”既是自然界运动变化的普遍规律,也是人事社会发展的必由之路。“自然之道”主要体现在治理社会的“习行实践”中,“圣贤要道,止在彝伦日用,彼

2024-11-15 10:16

糍粑的吃法大全(蛋黄糍粑的两种做法,可煎可烤)

不同于红糖糍粑,蛋黄糍粑(也叫鸡蛋糍粑、蛋煎糍粑主打咸口,更适合作为早餐、夜宵和正餐家宴的主食。端午期间吃咸鸭蛋,既有祛毒消灾的美好祝愿,也有补铁和钙的实际功效。要是家里没有咸蛋黄,用普通的鸡蛋液来做,味道也不是不错哒。那今天就先拿鸡蛋做个例子,一起来看看“烤”和“煎”的两种做法吧。蛋黄糍粑(烤箱版

2024-11-15 10:01

万户侯是什么意思古代(古代的“万户侯”放到今天是什么地位)

古时,人们讲究“学而优则仕”,对于做官总是有种莫名的执着,这种思想的影响甚至延续至今。而作为汉代侯爵最高一级的“万户侯”,“有能得齐王头者,封万户侯”到“不受万户侯,长揖千乘君”再到“粪土当年万户侯”,更是从古至今无数文臣武将的毕生追求。那么,可能就要有许多人问了,“万户侯”究竟是什么呢?“万户侯”

2024-11-15 09:45

养蜥蜴的危害是什么呢(巨蜥有毒性有多强悍?)

«——【·前言·】——»地球上存在着众多生物多样性的生命形式,其中爬行动物世界也有着其独特的角落。在这个令人着迷的领域中,巨蜥作为一种令人着迷的生物引发了广泛的兴趣和好奇心。巨蜥的广泛分布、令人叹为观止的食性以及其引人入胜的有毒性,使其成为了爬行动物学研究领域中备受瞩目的焦点。巨蜥不仅以其独特的外貌

2024-11-15 09:31

古代通信方式有哪几种(古代老百姓如何传递信息)

中国是世界上最早建立组织传递信息的国家之一,邮驿历史虽长达3000多年,但留存的遗址、文物并不多。驿站是中国古代供传递官府文书和军事情报的人或来往官员途中食宿、换马的场所。驿站自先秦时便已有之,秦汉时已经完善。“一骑红尘妃子笑,无人知是荔枝来”说的就是杨贵妃喜欢吃南方的荔枝,通过驿站的马匹快马加鞭一

2024-11-15 09:16

秋梨膏什么梗(“蒸梨十碗,不如梨膏一勺”)

“一场秋雨一场凉”,秋分过后,秋高气爽逐渐被冷风冷雨替代,早晚温差带来的燥气愈加明显,“秋燥”带来的身体不适感也让人愈发疲乏,适当进补润燥的食物,可有效对抗气候变化带来的侵扰。梨,清甜多汁,被誉为“百果之宗”,号称“天然矿泉水”。《木草纲目》称,梨“生者清六腑之热,熟者滋五脏之阴”,民间有“秋吃梨,

2024-11-15 09:01

怎么磨钻头的技巧(4步,让废旧的钻头重振雄“锋”)

第一步:刃口摆平轮面靠很多朋友磨钻头几下就磨废了,就是因为第一步没有做好,麻花钻的角一般为118°,磨钻头时,先将钻头的主切削刃与砂轮面放置在同一个平面,然后慢慢靠上去。第二步:钻轴斜放出锋角斜放的角度,这里说的是钻头轴心线与砂轮面之间的角度,一般取60°左右即可。斜放的时候一定要注意,同时还要考虑

2024-11-15 08:46

第五人格祭司加点和技能(祭司改定位了?

祭司作为第五人格这款游戏的一位早期角色,因为独特的技能机制、灵活多变的搭配玩法、别有风味的造型表现深受玩家追捧。早期通道技能仅供求生者穿越的特性一度使得祭司成为最强辅助,在圣心医院、月亮河公园等地图中具有得天独厚的优势。而在之后的版本更迭中,尽管监管者可以穿越并破坏通道,但超长通道的存在使得祭司拥有

2024-11-15 08:16