操作系统中存储系统简介 虚拟内存、内存管理、分页、保护

文章目录

    • 存储器的层次结构
        • 存储器之间的实际价格和性能差距
        • 存储器的层次关系
    • 虚拟内存
      • 简述
      • 主要概念
      • 虚拟内存的优势
    • 内存管理
        • 内存碎片
    • 内存分页
      • 页面置换算法
      • TLB加速分页
        • 软件TLB管理
        • 针对大内存的页管理技术
        • 三个重要的缓存能力
    • 内存保护
      • 总结

存储器的层次结构

image.png|500|500|500

对于存储器,速度越快,能耗越高,材料成本也越高
存储系统的层次结构从上到下依次为:

  1. 寄存器
    • 访问速度非常快,通常在半个CPU时钟周期内完成读写。
    • 与CPU主频相关,例如2GHz主频的CPU,其时钟周期为0.5纳秒。
  2. CPU Cache
    • 使用SRAM(Static Random-Access Memory,静态随机存储器)芯片,只要有电,数据就可以保存。
    • 分为三层:
      • L1 Cache:分为数据缓存和指令缓存,通常大小为32K。
      • L2 Cache:通常大小为1024K。
      • L3 Cache:通常大小为14080K。
  3. 内存
    • 使用DRAM(动态随机存取存储器)芯片。
    • 相比SRAM,DRAM密度更高,功耗更低,容量更大,造价便宜。
    • DRAM 存储一个 bit 数据,只需要一个晶体管和一个电容就能存储,但是因为数据会被存储在电容里,电容会不断 漏电,所以需要「定时刷新」电容
    • 访问速度较慢,大约在200~300个时钟周期之间。
  4. SSD/HDD硬盘
    • SSD(固态硬盘):数据在断电后仍然保存,读写速度比内存慢10~1000倍。
    • HDD(机械硬盘):通过物理读写方式访问数据,速度比内存慢约10万倍。
存储器之间的实际价格和性能差距

不同层级的存储器在成本和性能上存在显著差距:

  • L1 Cache:单位成本7美元/MB,随机访问延时1ns。
  • L2 Cache:单位成本7美元/MB,随机访问延时4ns。
  • 内存(DRAM):单位成本0.015美元/MB,随机访问延时100ns。
  • SSD:单位成本0.000415美元/MB,随机访问延时150μs。
  • HDD:单位成本0.00004美元/MB,随机访问延时10ms。
存储器的层次关系

存储器之间的交互是层级化的,CPU只与相邻的存储器设备进行交互。例如,CPU与L1 Cache交互,L1 Cache与L2 Cache交互,依此类推。每个存储器层级的速度越快,所需的材料成本也越高,因此高速度的存储器通常容量较小,而低速度的存储器则可以有更大的容量。

虚拟内存

简述

虚拟内存是一种内存管理技术,它使得应用程序认为自己拥有连续的可用内存空间,实际上这些空间可能是分散的。虚拟内存的实现依赖于硬件异常、地址翻译、主存、磁盘及内核软件的共同作用。

操作系统会提供一种机制,在物理内存和虚拟内存之间建立一个地址映射表,进程持有的虚拟地址会通过 CPU 芯 片中的内存管理单元(MMU)的映射关系,来转换变成物理地址,然后再通过物理地址访问内存

主要概念

  1. 地址空间:物理内存的抽象,进程可用于寻址内存的地址集合。
  2. 分页:将地址空间分割成多个块,每一块称作一页(Page),这些页被映射到物理内存(页框)。
  3. 页表:用于将虚拟页面(虚拟地址)映射为页框(物理地址),提供虚拟地址与物理地址的映射关系。
  4. 用户态与内核态
    • 用户态:进程不允许执行特权指令,必须通过系统调用接口访问内核。
    • 内核态:进程可以执行任何指令,访问系统中的任何内存位置。

虚拟内存的优势

  1. 结合磁盘和物理内存的优势:为进程提供速度快且容量大的存储。
  2. 独立的内存空间:为进程提供独立的内存空间,简化程序的链接、装载及内存分配过程。
  3. 访问控制:控制进程对物理内存的访问,提高系统的安全性。

内存管理

内存碎片
  • 外部碎片:整体内存容量足够,但无法为较大的内存请求分配连续的内存块,因为已分配的内存块分散在内存中。

  • 内部碎片:分配的内存块大于进程实际需要的内存量,导致内存浪费在内部碎片中。

  • 内存分段:将物理内存划分成不同的逻辑段,每个段用于存储特定类型的数据。每个段具有不同的大小和属性。分段机制下的虚拟地址由两部分组成,段选择因子和段内偏移量,而虚拟地址是通过段表与物理地址进行映射的。
    image.png|500|500|500

  • 内存分页:将地址空间划分成固定大小的页,动态增长的特点可能导致覆盖问题的出现。虚拟内存采用的是分⻚技术

分⻚主要用于实现虚拟内存,从而获得更大的地址空间;分段主要是为了使程序和数据可以被划分为逻辑上独立的 地址空间并且有助于共享和保护。

内存分页

页面置换算法

  1. 最佳页面置换算法(OPT):置换在未来最长时间不访问的页面,但在实际系统中无法实现。
  2. 先进先出置换算法(FIFO):将页面以队列形式保存,先进入队列的页面先被置换。
  3. 最近最久未使用的置换算法(LRU):根据页面未被访问的时长进行置换。
  4. 时钟页面置换算法:将所有页面保存在一个环形链表中,顺时针遍历页面进行置换。
  5. 最不常用算法:记录每个页面的访问次数,置换访问次数最少的页面。

TLB加速分页

  • 概念
    • TLB(转换检测缓冲区)是一种硬件设备,将虚拟地址直接映射到物理地址,避免访问页表。
  • 工作过程
    • 输入虚拟地址到MMU(内存管理单元)进行转换。
      1. 虚拟页号在TLB中
        • 如果找到有效的匹配且访问操作不违反保护位,直接从TLB中取出页框号,无需访问页表。
      2. 虚拟页号不在TLB中
        • 若未找到匹配,进行常规页表查询。
        • 淘汰TLB中的一个表项,并用新的页表项替换它。
软件TLB管理
针对大内存的页管理技术
  • (1) 多级页表
  • (2) 倒排页表
三个重要的缓存能力
  • 高速缓存
    • 根据存储器层次结构,将小而快的存储设备视为大而慢的存储设备的缓存。
  • 虚拟内存中的页类型
    1. 未分配
      • 未被进程申请使用的虚拟内存,空闲状态,未占用磁盘空间。
    2. 未缓存
      • 仅加载到磁盘中的页。
    3. 已缓存
      • 已加载到内存中的页(页框)。

内存保护

  • 目的: 保护用户进程的内存安全,防止恶意操作,确保系统稳定性。

  • 限制措施:

    • 只读代码段: 用户进程不能修改自身的只读代码段。
    • 内核代码和数据: 禁止用户进程读取或修改内核中的代码和数据结构。
    • 进程间内存访问:
      • 不允许读取或修改其他进程的私有内存。
      • 不允许修改其他进程共享的虚拟页面。
  • 潜在风险: 如果不限制内存访问,攻击者可能会访问和修改其他进程的内存,导致系统崩溃。

  • 虚拟寻址实现:

    • 通过内存管理单元 (MMU),每次内存访问都会查阅页表中的页表条目 (PTE)。
    • 在PTE中添加标志位来实现对虚拟页的访问控制权限。

总结

虚拟内存的思想,整体来看就是:通过结合磁盘和内存各自的优势,利用中间层对资源进行更合理地调度,充分提 高资源的利用率。并提供和谐以及统一的抽象。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/877176.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

用Python打造精彩动画与视频.2.1 Python基础语法概述

2.1 Python基础语法概述 Python作为一门功能强大且易于学习的编程语言,其基础语法简单直观,非常适合初学者入门。这一节将带你了解Python的基本语法规则,为后续制作动画和视频打下坚实的基础。 1. 变量与数据类型 Python的变量不需要提前声…

OCC 创建倒角

目录 一、简介 二、示例 1、使用BRepFilletAPI_MakeFillet 创建倒角 2、使用BRepFilletAPI_MakeChamfer创建斜面倒角 三、总结 一、简介 倒角指的是把工件的棱角切削成一定斜面的加工。倒角是为了去除零件上因机加工产生的毛刺,也为了便于零件装配,一般在零件端部做出…

达梦数据库归档介绍

一、什么是归档 数据库归档是一种数据管理策略,它涉及将旧的、不经常访问的数据移动到一个单独的存储设备,以便在需要时可以检索,同时保持数据库的性能和效率。 归档的主要目标是为了释放数据库中的空间,以便更有效地利用高性能…

【C++高阶数据结构】红黑树:全面剖析与深度学习

目录 🚀 前言:红黑树与AVL树的比较一: 🔥 红黑树的概念二: 🔥 红黑树的性质 三: 🔥 红黑树节点的定义和结构🚀 3.1 基本元素🚀 3.2 节点颜色🚀 3.…

MongoDB聚合操作详解

文章目录 聚合操作聚合管道管道(Pipeline)和阶段(Stage)常用的聚合阶段运算符准备数据集,执行脚本$project$match$count$group$unwind$limit$skip$sort$lookup聚合操作案例1聚合操作案例2 聚合优化执行顺序内存排序 整…

Hugo部署到Vercel踩大坑——全是XML文件?

问题描述 部署到Vercel全都是XML文件 Vercel是著名PAAS服务,相比于 Github Pages,其中国大陆可直接访问,因此尝试把Hugo站点发布到vercel中,部署后遇到问题,所有页面都为xml文件,如下所示: Ve…

AIGC-VDM -Video Diffusion Models论文解读

homepage:https://video-diffusion.github.io/ paper:https://arxiv.org/pdf/2204.03458 参考:https://zhuanlan.zhihu.com/p/585009571 视频生成方面的扩散模型 论文Video Diffusion Models精读,笔者会多多更新AIGC相关知识!点个关注吧&…

SpringCloud Alibaba 微服务(二):Nacos

目录 前言 一、什么是Nacos? 二、Nacos的主要功能 服务发现与注册 配置管理 服务健康监控 集群模式 三、安装Nacos 下载Nacos 初始化Nacos 单机模式 集群模式 访问Nacos 四、服务注册 新建子工程 引入Nacos依赖 配置application.yml 创建启动类 …

内网穿透的应用-中文版个人知识库Trilium笔记本地安装结合内网穿透远程协作

文章目录 前言1. 安装docker与docker-compose2. 启动容器运行镜像3. 本地访问测试4.安装内网穿透5. 创建公网地址6. 创建固定公网地址 前言 今天和大家分享一款在G站获得了26K的强大的开源在线协作笔记软件,Trilium Notes的中文版如何在Linux环境使用docker本地部署…

Linux基础复习(五)

前言 本文介绍了Linux常用命令,接Linux基础复习(四) 一、常用命令 命令通配符 在Linux中,命令通配符(也称为通配符模式或通配符表达式)是用来匹配文件名或其他字符串的一种特殊字符。这些通配符可以帮助…

深入解析 GZIP 压缩传输:优化网络性能的利器

个人名片 🎓作者简介:java领域优质创作者 🌐个人主页:码农阿豪 📞工作室:新空间代码工作室(提供各种软件服务) 💌个人邮箱:[2435024119@qq.com] 📱个人微信:15279484656 🌐个人导航网站:www.forff.top 💡座右铭:总有人要赢。为什么不能是我呢? 专栏导…

访问控制列表(ACL)

文章目录 ACL原理与基本配置ACL分类ACL组成ACL规则的匹配与应用 ACL原理与基本配置 ACL(Access Control List,访问控制列表) 读取二层、三层、四层报文信息根据预先定义好的规则对报文进行过滤和分类实现网络访问控制、防止网络攻击和提高网络带宽利用率等目的提高…

力扣SQL50 上级经理已离职的公司员工 一题双解

Problem: 1978. 上级经理已离职的公司员工 Code -- 方法 1 -- select e1.employee_id -- from employees e1 -- left join employees e2 -- on e1.manager_id e2.employee_id -- where e1.salary < 30000 -- and e1.manager_id is not null -- and e2.employee_id is…

学鸿蒙开发好找工作吗?

学鸿蒙开发是一个非常有潜力的方向&#xff0c;因为鸿蒙系统是华为自主研发的操作系统&#xff0c;随着其在全球范围内的推广和应用&#xff0c;越来越多的企业和组织开始重视并采用这一系统。这使得鸿蒙开发者的市场需求正在持续增长&#xff0c;为鸿蒙开发者提供了更多的就业…

C# 设计倒计时器、串口助手开发

文章目录 1. 实现一个简单的倒计时器开始、暂停2. 串口助手开发 1. 实现一个简单的倒计时器开始、暂停 namespace Timer {public partial class Form1 : Form{int count;//用于定时器计数int time;//存储设定的定时值bool parse false;//控制暂停计时public Form1(){Initiali…

Qt Designer,仿作一个ui界面的练习(一):界面的基本布局

初学不要太复杂&#xff0c;先做一个结构简单的&#xff0c;大致规划一下功能分区&#xff0c;绘制草图&#xff1a; 最终的效果&#xff1a; 界面主要由顶边栏、侧边栏、内容区构成。顶边栏左边是logo&#xff0c;右边是时钟显示。侧边栏最上边是切换按钮&#xff0c;用以动画…

Qt中对象树机制的优点以及潜在的隐患

目录 一、什么是对象树 二、对象树的优点 三、对象树潜在的隐患 一、什么是对象树 Qt中的 QObject 会用对象树来组织管理自己&#xff0c;那什么是对象树? 这个概念非常好理解。因为 QObject 类就有一个私有变量 QList<QObject *>&#xff0c;专门存储这个类的子孙后…

centos7-8/redhat7-8一键安装配置vsftp服务

1.脚本介绍 1.1.介绍&#xff1a; linux下一键安装及配置vsftpd服务 &#xff0c;通过执行install.sh脚本&#xff0c;脚本会根据参数区域的值执行安装和配置vsftp服务&#xff0c;安装后会创建一个默认ftp用户wangxf密码wangxf2023 1、支持自定义安装(更改脚本内参数值) 2、…

一篇文章带你入门爬虫并编写自己的第一个爬虫程序

一、引言 目前我们处在一个信息快速迭代更新的时代&#xff0c;海量的数据以大爆炸的形式出现在网络之中&#xff0c;相比起过去那个通过广播无线电、书籍报刊等传统媒介获取信息的方式&#xff0c;我们现在通过网络使用搜索引擎几乎可以获得任何我们需要的信息资源。 但与此同…

优化mac outlook通过nginx反向代理后使用ews访问Exchange 2016邮件访问速度慢的有效方法

在nginx配置exchange的反向代理后,mac系统上通过exchange邮箱,通过nginx代理连接邮箱,发现速度很慢,通过查看日志,也存在大量的401失败日志。通过不断的优化和尝试,目前来看,基本上正常了,基本上没有出现大量访问失败的问题。以下就是优化过程中尝试过的方法。 1. 身份…