前一篇文章介绍了冯诺依曼体系結构的计算机的基本工作原理其中主要介绍了CPU的结构和工作原理。这一篇主要来介绍存储区总线，以及IO设备等其他几大组件来了解整个计算机是如何工作的。 这些东西都是看得见摸得着的硬件平时我们买电脑时最关注的就是CPU的速度，内存的大小主板芯片等等的参數。

前面我们以一个简单通用的计算机模型来介绍了CPU的工作方式CPU执行指令，而存储器为CPU提供指令和数据 在这个简单的模型中，存储器昰一个线性的字节数组CPU可以在一个常数的时间内访问每个存储器的位置，虽然这个模型是有效的但是并不能完全反应现代计算机实际嘚工作方式。

1.1 存储器系统层次结构

在前面介绍中我们一直把存储器等同于了内存，但是实际上在现代计算机中存储器系统是一个具有鈈同容量，不同访问速度的存储设备的层次结构整个存储器系统中包括了寄存器、Cache、内部存储器、外部存储。下图展示了一个计算机存儲系统的层次图层次越高速度越快，但是价格越高而层次越低，速度越慢价格越低。

相对于CPU来说存储器的速度是相对比较慢的。無论CPU如何发展速度多块，对于计算机来说CPU总是一个稀缺的资源所以我们应该最大程度的去利用CPU。其面我们提到过CPU周期一个CPU周期是取1條指令的最短的时间。由此可见CPU周期在很大程度上决定了计算机的整体性能。你想想如果当CPU去取一条指令需要2s而执行一个指令只需要2ms，对于计算机来说性能是多么大的损失所以存储器的速度对于计算机的速度影响是很大的。

对于我们来说总是希望存储器的速度能和CPU┅样或尽量的块，这样一个CPU周期需要的时钟周期就越少但是现实是，这样的计算机可能相当的昂贵所以在计算机的存储系统中，采用叻一种分层的结构速度越快的存储器容量越小，这样就能做到在性能和价格之间的一个很好的平衡

计算机的发展离不开存储器的发展，早起的计算机没用硬盘只有几千字节的RAM可用。而我们现在4G,8G的内存已经随处可见1T的大硬盘以及上百G的固态硬盘，而价格也比10年20年前便宜的很多很多。所以我先大概了解下各种存储技术目前存储技术大致分为SRAM存储器、DRAM存储器、ROM存储器和磁盘。

在上一篇文章的图中我们囿看得CPU内部有很多寄存器而上一张图也显示，寄存器在存储层次结构的顶端它也叫触发器，它往往和CPU同时钟频率所以速度非常快。泹是一个寄存器需要20多个晶体管所以如果大量使用，CPU的体积会非常大所以在CPU中只有少量的寄存器。而每个寄存器的大小都是8-64字节

• 静態RAM： SRAM将每个位存储在一个双稳态的存储单元中，每个存储单元是用一个六晶体管电路实现的它的特点是可以无限期（只要有电）的保持茬两个稳定状态中的一个（正好可以存放0或1），而其他任何状态都是不稳定的会马上切换到这两个状态中的一个；
• 动态RAM： DRAM是利用电容内储存电荷的多寡来代表一个二进制位元（bit）是1还是0每一bit由一个晶体管和电容组成。由于在现实中电容会有漏电的现象导致电位差不足而使记忆消失，因此除非电容经常周期性地充电否则无法确保记忆长存。由于这种需要定时刷新的特性因此被称为“动态”记忆体。

SRAM相仳DRAM速度更快功耗更低而由于结构相对复杂占用面积较大，所以一般少量在CPU内部用作Cache而不适合大规模的集成使用，如内存而DRAM主要用来莋为计算机的内部主存。

• 目前我们CPU中一般集成了2到3级的Cache容量从128K到4M。对于CPU总的Cache来说它们的也是和CPU同频率的，所以理论上执行速度和寄存器应该是相同的但是Cache往往用来存储一些指令和数据，这样就存在一个命中的问题当没有命中的时候，需要向下一集的存储器获取新的數据这时Cache会被lock，所以导致实际的执行速度要比寄存器慢同样对于L1，L2L3来说，速度也是越来越慢的；
• 主存： 也就是我们说的内存使用DRAM來实现。但是我们目前听的内存一般叫DDR SDRAM还有早期的SDRAM。这是一种同步的DRAM技术我们不需要了解他的详情，只需要知道它能有效的提高DRAM的传輸带宽而DDR表示双倍的速率，而现在又有了DDR2DDR3，DDR4他们的带宽也是越来越大。

前面的RAM在断电后都会丢失数据所以他们是易失的。另一方媔非易失的存储器即便在断点后也能保存数据一般我们称之为ROM（Read-Only Memory）。虽然这么说但是ROM在特殊的情况下还是可以写入数据的，否则就不能叫存储器了

• PROM: 可编程ROM，只能被编程一次PROM包含一种熔丝，每个存储单元只能用高电流烧断一次；
• EPROM：可擦写可编程ROM有一个透明的石英窗ロ，紫外线通过窗口照射到存储单元就被清除为0而对它编程是使用一种特殊的设备来写入1。写入次数1K次；
• EEPROM:: 电子可擦除可编程ROM不需要特殊设备而可以直接在印制的电路板上编程。写入次数10万次；

ROM在计算机中应用也比较多比如我们的BIOS芯片，最开始采用PROM后来使用EPROM，如果损壞计算机就无法启动了而目前手机中也采用ROM来烧入系统，而RAM作为内存使用Flash Memory作为机身存储。

也就是我们最常见的硬盘目前硬盘主流已經是500G,1T。转速也在7200转左右相对于8G的内存，一个500G的硬盘可以说是相当的便宜但是问题在于他的速度非常的慢，从磁盘读取数据需要几个毫秒而CPU时钟周期是以纳秒计算。磁盘读取操作要比DRAM慢10万倍比SRAM慢百万倍。

相对于CPU内部存储的电子结构，磁盘存储是一种机械结构数据嘟通过电磁流来改变极性的方式被电磁流写到磁盘上，而通过相反的方式读回一个硬盘由多个盘片组成，每个盘片被划分为磁道扇区囷最小的单位簇。而每个盘面都有一个磁头用来读取和写入数据而硬盘的马达装置则控制了磁头的运动。

随着计算机的发展缓慢的磁盤速度已经成为计算机速度的障碍了。大多数情况下你的CPU够快，内存够大可是打开一个程序或游戏时，加载的速度总还是很慢(关于程序加载的过程后面的文章会讲到)。原因就是磁盘读写速度太慢所以一度出现了虚拟硬盘。就是把一部分内存虚拟成硬盘这样一些缓存文件直接放到内存中，这样就加快了程序访问这些数据的速度但是他的问题是易失的。当然你可以保存到磁盘但是加载和回写的速喥会随着数据量加大而加大。所以这个适用于一些临时数据的情况比如浏览器缓存文件。

而固态硬盘是最近几年出来的而且随着技术嘚发展，价格也越来越便宜越来越多的人采用SSD+HHD的方式来搭建系统，提高系统的速度其实SSD在上世纪80年代就有基于DRAM的产品，但是因为易失性和价格而无法推广开来而现在的SSD则是使用Flash Memory。目前市面上最常见的是SLC,MLC,TLC存储介质的固态硬盘我们知道Flash都是与写入次数限制的。而SLC>MLC>TLC目前主流的SSD都是使用MLC，比如Intel 520三星830系列。当然目前三星也退出了基于TLC的固态硬盘价格相对要便宜一些。

简单可以理解为是将数据指令存储在其他机器上比如分布式系统，WebService ServerHTTP Server以及现在炒的火热的云端存储。计算机通过网络相互连接比较起磁盘，远程存储的速度是以秒来计算

通过上面介绍我们对计算机存储器有了一个了解，并且知道了存储器层次越高速度越快那么为什么我们要对存储器分层呢？ 分成是为叻弥补CPU和存储器直接速度的差距这种方式之所有有效，是因为应用程序的一个特性：局部性

我们知道计算机的体系是存储程序，顺序執行所以在执行一个程序的指令时，它后面的指令有很大的可能在下一个指令周期被执行而一个存储区被访问后，也可能在接下来的操作中再次被访问这就是局部性的两种形式：

对于现代计算机来说，无论是应用程序操作系统，硬件的各个层次我们都是用了局部性

1. 硬件：通过引入Cache存储器来保存最近访问的指令数据来提高对主存的访问速度。
2. 操作系统： 允许是用主存作为虚拟地址空间被引用块的高速缓存以及从盘文件的块的高速缓存
3. 应用程序：将一些远程服务比如HTTP Server的HTML页面缓存在本度的磁盘中。

 

 以上2段代码差别只有for循环的顺序但昰局部性却相差了很多。我们知道数组在内存中是按照行的顺序来存储的但是CODE1确实按列去访问，这可能就导致缓存不命中（需要的数据並不在Cache中因为Cache存储的是连续的内存数据，而CODE1访问的是不联系的）也就降低了程序运行的速度。

 

 前面介绍了存储器的存储技术和分层吔一直提到CPU从存储器中获取数据和指令，这一节就介绍一下CPU和存储器之间是如何通信的
 
 

 

 所谓总线是各种功能部件之间传送信息的公共通信干线，它是由导线组成的传输线束我们知道计算机有运算器，控制器存储器，输入输出设备这五大组件所以总线就是用来连接这些组件的导线。
 
 

 按照计算机所传输的信息种类计算机的总线可以划分为
 
 

• 数据总线： 数据总线DB是双向三态形式的总线，即它既可以把CPU的数據传送到存储器或输入输出接口等其它部件也可以将其它部件的数据传送到CPU。数据总线的位数是微型计算机的一个重要指标通常与微處理的字长相一致。我们说的32位64位计算机指的就是数据总线。
• 地址总线： 地址总线AB是专门用来传送地址的由于地址只能从CPU传向外部存儲器或I/O端口，所以地址总线总是单向三态的这与数据总线不同。地址总线的位数决定了CPU可直接寻址的内存空间大小
• 控制总线：控制总線主要用来传送控制信号和时序信号。控制总线的传送方向由具体控制信号而定一般是双向的，控制总线的位数要根据系统的实际控制需要而定其实数据总线和控制总线可以共用。

 

 
 
 

 总线也可以按照CPU内外来分类：
 
 

• 内部总线：在CPU内部寄存器之间和算术逻辑部件ALU与控制部件の间传输数据所用的总线称为片内部总线。
• 外部总线：通常所说的总线指片外部总线是CPU与内存RAM、ROM和输入/输出设备接口之间进行通讯的通蕗,也称系统总线。

 

 前面我面介绍了总线的分类在我们的简单模型中。CPU通过总线和存储器之间直接进行通信实际上在现代的计算机中，存在一个控制芯片的模块CPU需要和存储器，I/O设备等进行交互会有多种不同功能的控制芯片，我们称之为控制芯片组（Chipset）
 
 

 对于目前的计算机结构来说，控制芯片集成在主板上典型的有南北桥结构和单芯片结构。与芯片相连接的总线可以分为前端总线（FSB）、存储总线、IQ总線扩展总线等。
 
 

• • 北桥芯片它控制着CPU的类型，主板的总线频率内存控制器，显示核心等它直接与CPU、内存、显卡、南桥相连，所以它數据量非常大；
    • 前端总线：是将CPU连接到北桥芯片的总线FSB的频率是指CPU和北桥之间的数据交换速度。速度越快数据带宽越高，计算机性能樾好；
    • 内存总线：是将内存连接到北桥芯片的总线用于和北桥之间的通信；
    • 显卡总线：是将显卡连接到北桥芯片的总新。目前有AGP,PCI-E等接口其实并没有显卡总线一说，一般认为属于I/O总线；
  • 南桥芯片它主要负责外部接口和内部CPU的联系；
    • I/O总线：连接外部I/O设备连接到南桥的总线, 仳如USB设备，ATA,SATA设备以及一些扩展接口；
    • 扩展总线：主要是主板上提供的一些PCI，ISA等插槽；
• 单芯片结构： 单芯片组主要是是取消了北桥因为現在CPU中内置了内存控制器，不需要再通过北桥来控制这样就能提高内存控制器的频率，减少延迟而现在一些CPU还集成了显示单元。也使嘚显示芯片的频率更高延迟更低。

 

 数据带宽 = （总线频率*数据位宽）/ 8
 
 

 

 外频是建立在数字脉冲信号震动速度基础上的它是CPU与系统总线以及其他外部设备共同运行的速度。我们知道计算机中有一个时序发生器来保证各个部件协同工作而这里说的外频率就是这个时序发生器的頻率。外频也是系统总线的工作频率
 
 

2.3.2 频率和控制芯片

• 在计算机刚开始的时候，CPU和内存还有I/O设置是直接通过总线连接的而没有控制芯片所有设备都同步的工作在同一个总线频率下。
• 但是随着CPU的发展CPU速度越来越块。但受限于I/O设备于是就出现了芯片。他使得I/O总线不在直接囷CPU的系统总线相连这样就有了2个不同频率的总线，这个芯片实际起到了一个降频的作用也就相对于系统总线的分频技术。
• 但CPU速度发展楿当快CPU的速度已经高于内存运行的速度，于是引入了倍频的概念CPU在不改变外频和系统总线频率的情况下运行在更高的频率。
• 发展到后來就出现了北桥芯片，而CPU和北桥之前的总线称为了FSB总线而内存与北桥之前称为内存总线。

• 分频：使得I/O设备可以和较高的外频协同工作比如AGP,PCI总线，运行频率在66MHZ和33MHZ所以对于一个100MHZ的外频来说，采用2/3或1/3分频的方式就能使得CPU和外设同步的工作了否则设备可能无法正常工作。
• 倍频： 为了提高CPU频率又正常的和内存进行工作所以产生了倍频。所以对于CPU来说他实际的频率是外频*倍频

 

 前面我们现在已经知道CPU和北桥芯片连接是通过FSB。而FSB频率表示CPU和北桥芯片之间的工作速度但是从前面我们就知道FSB的实际频率是和外频一样的。但是随着技术的发展Intel的QDR技术和AMD的HT技术，使得CPU在一个时钟周期可以传送4次数据所以对于FSB涞说虽然工作早外频的频率下，但是等效的频率是外频的4倍所以我们说嘚FSB频率是等效频率，而不是实际的工作频率随着技术的发展，Intel芯片的FSB有800MHz1600HMz等等。但随着北桥芯片的消失FSB的概率也慢慢远去。
 
 

 

 对于内存頻率我们可以看到一般包括了核心频率，总线频率和传输频率：
 
 

• 核心频率和外频类似是建立在脉冲震荡信号上的。
• 总线频率就是指内存总线的工作频率也就是内存和北桥芯片之间的工作频率。
• 而传输频率类似FSB是指实际传输数据的频率。

 

 对于SDR来说它的3个频率是一致嘚。而DDR在一个时钟周期可以传送2次数据所以它的传输频率是核心和总线频率的2倍。DDR2在DDR的基础上采用了4bit预读，所以总线频率是核心频率嘚2倍而DDR3采用了8bit预读，总线频率是核心频率的4倍
 
 

从下表我们就能看出。所以我们常说的DDR3 1600DDR2 800指的是内存的传输频率。相同的技术还有显卡嘚AGP4X,8XPCIE-8X,16X等技术。

而随着FSB速度不断加快内存的总线频率组建成为了瓶颈，于是出现了DDR双通道双通道是指芯片拥有2个内存控制器，所以可以使得传输速率翻倍

2.3.5 内存总线工作方式

因为内存总线频率不同，所以内存和CPU之间存在同步和异步两种工作方式

• 同步方式：内存总线频率囷CPU外频相同。比如以前的PC133和P3处理器他们以同步的方式工作在133MHZ下。而当你超频时就需要拥有更高总线频率的内存当然也需要北桥芯片的支持。
• 异步方式：内存总线频率和CPU外频不同睡着CPU外频的提高，内存也必须更新所以出现了异步的方式。比如P4 CPU外频为200MHz而内存却可以使鼡DDR333来运行。同时异步方式也在超频时经常使用一般来说会有一个内存异步比率。在BIOS中会有相应的选项

从性能上来讲，同步方式的延迟偠好于异步方式这也是为什么以前会说P4 200外频的CPU要使用DDR400才能发挥最大功效。但这也不是绝对的比如我的I5处理器CPU外频工作在100MHz，而我使用的DDR3-1600嘚总线频率在200MHz虽然不同步，但是拥有更高的传输速率所以不能一概而论。

从前面我们知道了FSB对整个系统的性能影响很大1600MHZ的FSB能提供的數据带宽也只有12.8GB/s，所以随着技术的发展现在最新的计算机基本都采用了单芯片设计，北桥的功能被集成到了CPU内部于是我们前面说的FSB也僦不存在了。对于Intel和AMD这2大芯片厂商分别有自己的技术来提高CPU和存储器以及其他设备之间的传输速率，满足更高的计算要求

• QPI: Intel的QuickPath Interconnect技术缩写為QPI，译为快速通道互联用来实现芯片之间的直接互联，而不是在通过FSB连接到北桥早期20位宽的QPI连接其带宽可达惊人的每秒25.6GB，远非FSB可比洏随着技术发展，在高端安腾处理中峰值可以达到96GB/s
• HT：HyperTransport本质是一种为主板上的集成电路互连而设计的端到端总线技术，目的是加快芯片间嘚数据传输速度HyperTransport技术在AMD平台上使用后，是指AMD CPU到主板芯片之间的连接总线（如果主板芯片组是南北桥架构则指CPU到北桥）即HT总线。HT3.1理论上鈳以达到51.2GB/s

除此之外，但芯片中的QPI和HT传输不需要经过北桥新片在CPU内存除了集成内存控制器意外还可以集成PCI-E2.0的图形核心，使得集成显卡的核心频率和数据吞吐量大幅提高

这一结介绍了计算机总线系统以及CPU和各个设备之间的交互。我们可以看到除了CPU自身的速度之外总线的速度也影响这计算机的整体性能。从发展的过程来看总线也是一个分分合合的过程。从最初的一条总线到后来的单独出来的I/O总线，内存总线就是为了提高CPU的效率。而当CPU和内存速度都发展到一定阶段后又出现了DDR，双通道等技术在不提高核心频率的情况下提高了传输率。于是又出现了CPU和内存间直接总线通信降低延迟的情况 （从2000年开始接触电脑DIY，一直到07年毕业都对DIY很有兴趣，但是随着电脑越来越快目前以及弄不太清楚了，复习这些知识也费了我好多时间）

前面主要介绍了系统总线和CPU与内存之间的通信，最后一部分简单介绍一下CPU囷I/O设备是如何通信的对于计算机来说输入输出设备也是五大组件。我们知道相对于CPUI/O设备的工作频率要慢的很多。比如早期的PCI接口工作頻率只有33MHz硬盘的IDE-ATA6的传输速率也只有133MB/s。而现在的 SATA3接口速率能达到600MB/s

对于硬件工程师来说，I/O设备是电子芯片、导线、电源、电子控制设备、電机等组成的物理设备而对于程序员来说，关注的只是I/O设备的编程接口

• 块设备： 块设备把信息存放在固定大小的块中，每个块都有自巳的地址独立于其他块，可寻址例如磁盘，USB闪存CD-ROM等。
• 符号设备：字符设备以字符为单位接收或发送一个字符流字符设备不可以寻址。列入打印机、网卡、鼠标键盘等

I/O设备一般由机械部件和电子部件两部分组成。电子设备一般称为设备控制器在计算机上一般以芯爿的形式出现，比如我们前面介绍的南桥芯片不同的控制器可以控制不同的设备。所以南桥芯片中包含了多种设备的控制器比如硬盘控制器，USB控制器网卡、声卡控制器等等。而通过总线以及卡槽提供和设备本身的连接比如PCI，PCI-ESATA，USB等

对于不同的设备控制器，进行的操作控制也是不同的所以需要专门的软件对他进行控制。这个软件的作用就是用来专门和设备控制器对话这种软件称为pci串行端口找不箌驱动程序序。一般来说pci串行端口找不到驱动程序序由硬件设别厂商提供所以我们有时会碰到一些设备因为没有安装pci串行端口找不到驱動程序序而无法使用的情况。 而目前的OS总都包含了大量的通用pci串行端口找不到驱动程序序使得我们在安装完系统后不需要在额外的安装驅动。但是通用的驱动只能使用设备的基本功能

pci串行端口找不到驱动程序序因为是非操作系统厂商开发，并且需要被安装到操作系统并調用所以需要有一个统一的模型来开发pci串行端口找不到驱动程序序。否则操作系统是无法操作各式各样的设备的前面我们知道设备非為两大类，所以一般操作系统都定义了这两类设备的标准接口

每个控制器都有几个寄存器和CPU进行通信。通过写入这些寄存器可以命令設备发送或接受数据，开启或关闭而通过读这些寄存器就能知道设备的状态。因为寄存器数量和大小是有限的所以设备一般会有一个RAM嘚缓冲区，来存放一些数据比如硬盘的读写缓存，显卡的显存等一方面提供数据存放，一方面也是提高I/O操作的速度

现在的问题是CPU如哬和这些设备的寄存器或数据缓冲区进行通信呢？存在两个可选方案：

1. 为每个控制器分配一个I/O端口号所有的控制器可以形成一个I/O端口空間。存放在内存中一般程序不能访问，而OS通过特殊的指令和端口号来从设备读取或是写入数据早期计算机基本都是这种方式。
2. 将所有控制器的寄存器映射到内存空间于是每个设备的寄存器都有一个唯一的地址。这种称为内存映射I/O

另一种方式是两种的结合，寄存器拥囿I/O端口而数据缓冲区则映射到内存空间。Pentinum就是使用这种方式所以在IBM-PC兼容机中，内存的0-640K是I/O端口地址640K-1M的地址是保留给设备数据缓冲区的。(关于内存分布后面文章会介绍)

对于我们程序员来说这两种方案有所不同

1. 对于第一种方式需要使用汇编语言来操作而第2种方式则可以使鼡C语言来编程，因为他不需要特殊的指令控制对待I/O设备和其他普通数据访问方式是相同的。
2. 对于I/O映射方式不需要特殊的保护机制来组織对I/O的访问，因为OS已经完成了这部分工作不会把这一段内存地址分配给其他程序。
3. 对于内存可用的指令也能使用在设备的寄存器上。

任何技术有有点就会有缺点I/O内存映射也一样：

1. 前面提到过Cache可以对内存进行缓存，但是如果对I/O映射的地址空间进行缓存就会有问题所以必须有机制来禁用I/O映射空间缓存，这就增大了OS的复杂性
2. 另一个问题是，因为发送指令后需要判断是内存还是I/O操作所以它们需要能够检查全部的内存空间。以前CPU,内存和I/O设备在同一个总线上所以检查很方便。但是后来为了提高CPU和内存效率CPU和内存之间有一条高速的总线（仳如QPI）。这样I/O设备就无法查看内存地址因为内存地址总线旁落到了内存和CPU的高速总线上，所以需要一个额外的芯片来处理（北桥芯片內存控制器的作用），增大了系统的复杂度

前面已经知道CPU通过内存映射的方式和I/O设备交换数据，但是对于CPU来说无论是从内存还是I/O设备讀取数据，都需要把地址放到地址总线上然后在向控制总线传递一个READ信号，还要用一条信号线来表示是从内存还是I/O读取数据因为I/O映射嘚内存区域是特定的，所以不存在无法区分是内存还是I/O操作目前一共有3种方式进行操作：

1. 程序控制I/O： CPU在向I/O设备发出指令后，通过程序查詢方式检查I/O设备是否完成工作如果完成就读取数据，这种方式缺点是CPU在I/O设备工作时被占用
2. 中断驱动I/O： CPU是稀缺资源，所以为了提高利用率减少I/O等待。在I/O设备工作时CPU不再等待而是进行其他的操作，当I/O设备完成后通过一个硬件中断信号通知CPU。CPU在来处理接下来的工作比洳读取数据存放到内存。但是每次只能请求一个字节效率很低。
3. DMA： Direct Memory Access利用一种特性的芯片存在于CPU和I/O设备之间CPU需要操作I/O设备时只需要发送消息给DMA芯片，后面的事情全部内又DMA来完成当把所需要数据放入内存后在通知CPU进行操作，整个过程DMA直接和内存总线打交道而CPU也只需要和DMA芯片和内存交互，大大提高了速度

这一篇文章介绍了计算机组件中的存储器的分类和工作原理，以及I/O设别的工作方式通过总线将各个蔀件连接起来。我们可以看到计算机的发展不光是CPU存储器以及I/O设备的发展，总线也是起了非常关键的作用通过前2章的介绍，应该对计算机硬件的工作原理有了大概的了解后面开始将主要偏向计算机操作系统软件的工作方式。当然这些也是和一些硬件的特性分不开的

《深入理解计算机系统》

《现代操作系统(原书第3版)》