0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

關(guān)于虛擬內(nèi)核和物理內(nèi)存的那些事

Linux閱碼場(chǎng) ? 來源:唯美學(xué)編程 ? 作者:唯美學(xué)編程 ? 2021-05-28 15:25 ? 次閱讀

一、讓有意義的事情變的有意思

二、物理內(nèi)存、虛擬內(nèi)存

三、Linux 中的換頁機(jī)制

一、讓有意義的事情變的有意思昨天,看到下面這句話,送給您:

讓有意思的事情變的有意義,讓有意義的事情變的有意思!

不敢說這是一句人生哲學(xué),但是我們可以從這句話中找到我們做一件事情時(shí)的導(dǎo)向。

比如:在學(xué)習(xí) Linux 操作系統(tǒng)的過程中,很多枯燥無味的知識(shí)點(diǎn),都是不好玩、沒有意思的事情。

但是為什么我們還要逼著自己,靜下心來啃那些大部頭書籍呢?因?yàn)檫@件事情有意義!

所以啊,如果能夠在這件有意義的事情上,再變得更有意思,那就可以調(diào)動(dòng)我們潛在的很多積極性。

這篇文章,我們用簡單、輕松的方式,來聊一下老生常談的虛擬內(nèi)核和物理內(nèi)存的那些事。

二、物理內(nèi)存、虛擬內(nèi)存1. 從 x86 硬件角度看

在 x86 平臺(tái)上,主存儲(chǔ)器(也就是我們說說的內(nèi)存)負(fù)責(zé)存儲(chǔ)指令和數(shù)據(jù),它的作用僅次于 CPU

離開了內(nèi)存,性能再好的 CPU 也無法工作。

就像人類的大腦一樣,如果沒有了記憶功能,再怎么聰明都無法施展。

內(nèi)存被劃分為若干個(gè)存儲(chǔ)單元,從 0 開始編號(hào),一直到最大的那個(gè)存儲(chǔ)單元。

CPU 通過地址總線來定位一個(gè)內(nèi)存的空間,通過數(shù)據(jù)總線從內(nèi)存中讀取數(shù)據(jù)、或者向內(nèi)存中寫入數(shù)據(jù)。

我們都知道,同一個(gè) x86 平臺(tái)的硬件,既可以安裝 Windows 操作系統(tǒng),也可以安裝 Linux 操作系統(tǒng)。

也就是說,在生產(chǎn)硬件的時(shí)候,它并不知道: 在自己的硬件之上,將會(huì)運(yùn)行什么樣的程序。

也許會(huì)有高手直接寫一個(gè)牛逼的程序,直接來管理各種硬件資源、實(shí)現(xiàn)自己特定的功能呢???

不管如何,x86 平臺(tái)處理器架構(gòu)定義了自己的一套規(guī)則來訪問內(nèi)存。

因此,從 x86 平臺(tái)硬件角度看,只有(物理)內(nèi)存這個(gè)東西,它壓根不知道什么是虛擬內(nèi)存。

2. 從操作系統(tǒng)的角度看

操作系統(tǒng)最重要的功能就是:向應(yīng)用程序屏蔽了各種硬件資源,提供更加友好的接口,讓程序開發(fā)變得更容易。

所以,操作系統(tǒng)會(huì)充分利用硬件的各種運(yùn)行機(jī)制,然后進(jìn)行抽象、包裝,面向應(yīng)用程序開發(fā)者提供一個(gè)穩(wěn)定的環(huán)境。

那么對(duì)于內(nèi)存來說,操作系統(tǒng)向下對(duì)物理內(nèi)存進(jìn)行管理,向上對(duì)應(yīng)用程序提供虛擬內(nèi)存。

虛擬內(nèi)存,就是操作系統(tǒng)在應(yīng)用程序與物理內(nèi)存之間加入的一層抽象,加入這個(gè)抽象層之后,有很多的好處。

3. 從應(yīng)用程序開發(fā)者的角度看

在很久以前,各種單片機(jī)、嵌入式 MCU 上,編寫應(yīng)用程序的時(shí)候,經(jīng)常會(huì)面對(duì)內(nèi)存很緊張的情況,這是就要很好的來優(yōu)化自己的程序,利用有限的硬件資源來實(shí)現(xiàn)一些功能。

(突然想起多年之前的以為老工程師對(duì)我說,面對(duì)那么有限的一點(diǎn)資源,都會(huì)想哭?。?/p>

隨著硬件的快速發(fā)展,這種硬件資源緊張的情況好像很少遇到了,給我們的感覺是:內(nèi)存我可以隨便用,想要多少就 malloc 多少。

當(dāng)然了,操作系統(tǒng)會(huì)給出一些限制的,這只是操作系統(tǒng)層面的限制,因?yàn)樗凶约旱目剂恳蛩亍?/p>

當(dāng)應(yīng)用程序提出申請(qǐng)一塊內(nèi)存空間時(shí),操作系統(tǒng)為了滿足應(yīng)用程序的需求,就會(huì)從虛擬內(nèi)存中“劃分”出一塊空間,然后把這個(gè)空間的開始地址返回給應(yīng)用程序。

因此,從應(yīng)用程序開發(fā)的角度看,我們并不關(guān)心物理內(nèi)存、虛擬內(nèi)存。

只要我 malloc 了,操作系統(tǒng)給我一個(gè)足夠的空間就行!至于這個(gè)空間是從哪里分配的,I don‘t care!

也就是說,應(yīng)用程序是面向虛擬內(nèi)存編寫的,而不是面向物理內(nèi)存編寫的。

當(dāng)然了,最終存儲(chǔ)數(shù)據(jù)的肯定是物理內(nèi)存,至于虛擬內(nèi)存如何與物理內(nèi)存建立對(duì)應(yīng)的映射關(guān)系,這就是由操作系統(tǒng)操心的事情了。

每個(gè)應(yīng)用程序只能看到自己的虛擬內(nèi)存空間,這是一塊連續(xù)的空間,從而保證了不同應(yīng)用程序之間的隔離,達(dá)到安全目的。

三、Linux 中的換頁機(jī)制如今,我們?nèi)€一臺(tái) PC 機(jī),內(nèi)存條最少都是 8G、16G吧!但是在多年之前,這是非常、非常奢侈的一件事情,主要還是價(jià)格的因素。

我記得自己在做畢業(yè)設(shè)計(jì)的時(shí)候,為了保存代碼,去南京珠江路買了一個(gè) U 盤,64G,好像是 70 塊錢。

相比內(nèi)存來說,硬盤的價(jià)格就便宜多了!

因此,Linux 操作系統(tǒng)就充分利用硬盤來糊弄應(yīng)用程序,讓應(yīng)用程序覺得有永遠(yuǎn)也用不完的內(nèi)存資源。

在一個(gè) 32 位的系統(tǒng)中,應(yīng)用程序可以訪問的最大內(nèi)存空間是 2 的 32 次方,也就是 4 GB,即使此時(shí)實(shí)際的物理內(nèi)存并沒有這么大。

其實(shí)這就類似于一家旅館,假如有一個(gè)老板,開了一家旅館,一共有 1000 個(gè)房間。

同時(shí),老板還有一個(gè)空間更大的倉庫,倉庫里可以放 10000 個(gè)床鋪。這個(gè)老板很聰明,他明白 2 個(gè)事實(shí)情況:

旅行團(tuán)或顧客只能看到這個(gè)旅館的門頭和大廳,并不知道旅館里面的房間布局;

旅行團(tuán)并不會(huì)在同一時(shí)刻、扎堆的同時(shí)來住宿;

因此老板在對(duì)外宣傳的時(shí)候,就說:我的旅館很大,有 10000 個(gè)房間,歡迎前來入??!

為了簡化問題,我們假設(shè)每個(gè)旅行團(tuán)有 100 人。

在某個(gè)時(shí)間,當(dāng)有第一批的 3 個(gè)旅行團(tuán)入住的時(shí)候,老板覺得房間足夠,于是把這 300 人都安排在旅館的房間中。

過了一會(huì),又來了第二批 4 個(gè)旅行團(tuán),此時(shí)總的住宿人數(shù)變成了 700 人。

老板開始計(jì)算:一共就 1000 個(gè)房間,現(xiàn)在消耗掉 700 個(gè)了,還剩 300 個(gè),還能撐一會(huì)。

沒多久,第三批顧客上門了,這回是 5 個(gè)旅行團(tuán)的人數(shù):500 人 。因?yàn)槔习逍麄髡f:有 10000 個(gè)房間,充足的很。

老板在面對(duì)這新的 500 個(gè)人時(shí),只見他從容的把第一批和第二批的 700 個(gè)人,從房間中轉(zhuǎn)移到倉庫。

我們假設(shè)顧客都處于睡眠狀態(tài),僅僅需要一張床而已,不需要消耗其他的資源。

然后把這新的 500 人,安排在房間中入住。

此時(shí),一共入住了 300 + 400 + 500 = 1200 人,雖然旅館只有 1000 個(gè)房間,但是通過借用倉庫去暫時(shí)存放處于睡眠狀態(tài)的顧客,此時(shí)旅館中還剩下 500 個(gè)空閑的房間。

還可以繼續(xù)接待客人。。

當(dāng)?shù)搅?第一批的 3 個(gè)旅行團(tuán)退房的時(shí)間時(shí),老板再把這 300 人從倉庫中 偷偷地轉(zhuǎn)移到旅館的房間中。這些客人醒來一看,還是我入睡時(shí)的那個(gè)環(huán)境,很好很好。。。

以上這個(gè)過程,就非常類似 Linux 系統(tǒng)中虛擬內(nèi)存的換頁方式:

虛擬內(nèi)存 = 對(duì)外宣傳的 10000 個(gè)房間;

物理內(nèi)存 = 實(shí)際的 1000 個(gè)房間;

硬盤 = 只有床鋪的倉庫。

當(dāng)物理內(nèi)存不夠的時(shí)候,操作系統(tǒng)把一些物理內(nèi)存頁的內(nèi)存暫時(shí)存儲(chǔ)到空間更大、價(jià)格更便宜的硬盤上,然后就可以回收這些物理內(nèi)存繼續(xù)使用了。

怎么樣,通過這樣的類比方式,是不是對(duì) Linux 系統(tǒng)中的虛擬內(nèi)存有更加感性的認(rèn)識(shí)?

最后,再向你安利一下文章開頭的那句話:

當(dāng)你面對(duì)一件有意義、但是沒意思的事情時(shí),不妨考慮給它加點(diǎn)意思;而當(dāng)你面對(duì)有意思、但是沒意義的事情時(shí),也可以給它賦予一些意義!

原文標(biāo)題:Linux系統(tǒng)是如何用虛擬內(nèi)存來欺騙應(yīng)用程序的?

文章出處:【微信公眾號(hào):Linux閱碼場(chǎng)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • Linux
    +關(guān)注

    關(guān)注

    87

    文章

    11123

    瀏覽量

    207925
  • 內(nèi)存
    +關(guān)注

    關(guān)注

    8

    文章

    2903

    瀏覽量

    73547
  • 操作系統(tǒng)
    +關(guān)注

    關(guān)注

    37

    文章

    6545

    瀏覽量

    122756

原文標(biāo)題:Linux系統(tǒng)是如何用虛擬內(nèi)存來欺騙應(yīng)用程序的?

文章出處:【微信號(hào):LinuxDev,微信公眾號(hào):Linux閱碼場(chǎng)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    輥壓機(jī)軸承位磨損修復(fù)你不知道的那些

    電子發(fā)燒友網(wǎng)站提供《輥壓機(jī)軸承位磨損修復(fù)你不知道的那些.docx》資料免費(fèi)下載
    發(fā)表于 03-12 15:10 ?0次下載

    物理內(nèi)存模型的演變

    內(nèi)存管理概述中,主要是以Linux v2.6.11為例進(jìn)行分析的,但是計(jì)算技術(shù)在不斷發(fā)展,新的存儲(chǔ)架構(gòu)、新的指令集架構(gòu)、新的SoC架構(gòu)等都對(duì)物理內(nèi)存模型的抽象提出了更高要求。為此,必須抽象一種完全獨(dú)立于硬件架構(gòu)的
    的頭像 發(fā)表于 02-25 10:35 ?352次閱讀

    Linux內(nèi)核內(nèi)存管理之內(nèi)核非連續(xù)物理內(nèi)存分配

    的主要優(yōu)點(diǎn)是避免了外部碎片,而缺點(diǎn)是需要修改內(nèi)核頁表。顯然,非連續(xù)內(nèi)存區(qū)域的大小必須是4096的倍數(shù)。Linux使用非連續(xù)物理內(nèi)存區(qū)的場(chǎng)景有幾種:(1)為swap區(qū)分配數(shù)據(jù)結(jié)構(gòu);(2)
    的頭像 發(fā)表于 02-23 09:44 ?751次閱讀
    Linux<b class='flag-5'>內(nèi)核</b><b class='flag-5'>內(nèi)存</b>管理之<b class='flag-5'>內(nèi)核</b>非連續(xù)<b class='flag-5'>物理</b><b class='flag-5'>內(nèi)存</b>分配

    Linux內(nèi)核內(nèi)存管理之ZONE內(nèi)存分配器

    內(nèi)核中使用ZONE分配器滿足內(nèi)存分配請(qǐng)求。該分配器必須具有足夠的空閑頁幀,以便滿足各種內(nèi)存大小請(qǐng)求。
    的頭像 發(fā)表于 02-21 09:29 ?746次閱讀

    拆解mmap內(nèi)存映射的本質(zhì)!

    mmap 內(nèi)存映射里所謂的內(nèi)存其實(shí)指的是虛擬內(nèi)存,在調(diào)用 mmap 進(jìn)行匿名映射的時(shí)候(比如進(jìn)行堆內(nèi)存的分配),是將進(jìn)程虛擬內(nèi)存空間中的某一
    的頭像 發(fā)表于 01-24 14:30 ?925次閱讀
    拆解mmap<b class='flag-5'>內(nèi)存</b>映射的本質(zhì)!

    linux內(nèi)核主要由哪幾個(gè)部分組成,作用是什么

    內(nèi)存。它將內(nèi)存劃分為不同的區(qū)域,并通過內(nèi)存管理算法來分配和回收內(nèi)存。它還提供了虛擬內(nèi)存功能,允許多個(gè)進(jìn)程共享系統(tǒng)的
    的頭像 發(fā)表于 01-22 14:34 ?2277次閱讀

    Windows服務(wù)器虛擬內(nèi)存的設(shè)置建議

    虛擬內(nèi)存是計(jì)算機(jī)操作系統(tǒng)用于擴(kuò)展物理內(nèi)存的一種機(jī)制。在Windows服務(wù)器上,虛擬內(nèi)存的設(shè)置對(duì)系統(tǒng)性能和穩(wěn)定性至關(guān)重要。以下是關(guān)于Windo
    的頭像 發(fā)表于 12-25 17:03 ?1687次閱讀

    java虛擬機(jī)內(nèi)存包括遠(yuǎn)空間內(nèi)存

    Java虛擬機(jī)(JVM)內(nèi)存是Java程序執(zhí)行時(shí)所使用的內(nèi)存空間的總稱,包括了Java堆、方法區(qū)、本地方法棧、虛擬機(jī)棧和程序計(jì)數(shù)器等多個(gè)部分。在這些
    的頭像 發(fā)表于 12-05 14:15 ?309次閱讀

    關(guān)于MLCC(多層陶瓷電容)替代Film Cap (薄膜電容)的那些

    關(guān)于MLCC(多層陶瓷電容)替代Film Cap (薄膜電容)的那些
    的頭像 發(fā)表于 12-04 17:35 ?1329次閱讀
    有<b class='flag-5'>關(guān)于</b>MLCC(多層陶瓷電容)替代Film Cap (薄膜電容)的<b class='flag-5'>那些</b><b class='flag-5'>事</b>

    Linux內(nèi)核內(nèi)存規(guī)整總結(jié)

    1.前言 伙伴系統(tǒng)作為內(nèi)核最基礎(chǔ)的物理內(nèi)存分配器,具有高效、實(shí)現(xiàn)邏輯簡介等優(yōu)點(diǎn),其原理頁也盡可能降低內(nèi)存外部碎片產(chǎn)生,但依然無法杜絕碎片問題。外部碎片帶來的最大影響就是
    的頭像 發(fā)表于 11-11 11:17 ?1156次閱讀
    Linux<b class='flag-5'>內(nèi)核</b><b class='flag-5'>內(nèi)存</b>規(guī)整總結(jié)

    linux內(nèi)存性能優(yōu)化介紹

    不同;圖示為 32 位和 64 位系統(tǒng)的虛擬地址空間; 內(nèi)存映射是將虛擬內(nèi)存地址映射到物理內(nèi)存地址,內(nèi)核
    的頭像 發(fā)表于 11-10 15:23 ?578次閱讀
    linux<b class='flag-5'>內(nèi)存</b>性能優(yōu)化介紹

    虛擬內(nèi)存物理地址的轉(zhuǎn)換

    處理器根據(jù)頁表基地址控制寄存器TTBCR和虛擬地址來判斷使用哪個(gè)頁表基地址寄存器,是TTBR0還是TTBR1。(一個(gè)基值是內(nèi)核的,一個(gè)用戶態(tài)的) 頁表基地址寄存器中存放著一級(jí)頁表的基地址。 處理器
    的頭像 發(fā)表于 10-30 17:34 ?595次閱讀
    <b class='flag-5'>虛擬內(nèi)存</b>到<b class='flag-5'>物理</b>地址的轉(zhuǎn)換

    如何解決內(nèi)存碎片與內(nèi)存交換效率慢的問題

    空間組合起來,是不是解決了這個(gè)問題?同樣的,內(nèi)存交換的時(shí)候我們保證交換的數(shù)據(jù)小,是不是能提高內(nèi)存交換的效率? 這個(gè)辦法就是內(nèi)存分頁,分頁是把整個(gè)虛擬
    的頭像 發(fā)表于 10-09 16:57 ?838次閱讀
    如何解決<b class='flag-5'>內(nèi)存</b>碎片與<b class='flag-5'>內(nèi)存</b>交換效率慢的問題

    Linux虛擬地址空間和物理地址空間的關(guān)系

    很多人接觸Linux的內(nèi)存管理是從malloc()這個(gè)C語言庫函數(shù)開始,也是從那時(shí)開始就知道了虛擬內(nèi)存的概念。但很多人可能并不知道虛擬地址是如何轉(zhuǎn)換成物理地址的,今天帶你搞懂
    的頭像 發(fā)表于 10-08 11:40 ?918次閱讀
    Linux<b class='flag-5'>虛擬</b>地址空間和<b class='flag-5'>物理</b>地址空間的關(guān)系

    PMP物理內(nèi)存保護(hù)介紹

    PMP 和 Paging 物理內(nèi)存保護(hù)機(jī)制旨在與 RISC?V 指令集手冊(cè),第二卷:特權(quán)架構(gòu),版本 1.10 中描述的基于頁面的虛擬內(nèi)存系統(tǒng)組合。啟用分頁后,訪問虛擬內(nèi)存的指令可能會(huì)導(dǎo)
    的頭像 發(fā)表于 10-07 17:49 ?872次閱讀