0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Linux內(nèi)存機(jī)制:手動(dòng)釋放Swap、Buffer和Cache

如意 ? 來(lái)源:民工哥技術(shù)之路 ? 作者:Darren_Wen ? 2020-08-13 14:59 ? 次閱讀

一、什么是linux的內(nèi)存機(jī)制?

我們知道,直接從物理內(nèi)存讀寫數(shù)據(jù)要比從硬盤讀寫數(shù)據(jù)要快的多,因此,我們希望所有數(shù)據(jù)的讀取和寫入都在內(nèi)存完成,而內(nèi)存是有限的,這樣就引出了物理內(nèi)存與虛擬內(nèi)存的概念。

物理內(nèi)存就是系統(tǒng)硬件提供的內(nèi)存大小,是真正的內(nèi)存,相對(duì)于物理內(nèi)存,在linux下還有一個(gè)虛擬內(nèi)存的概念,虛擬內(nèi)存就是為了滿足物理內(nèi)存的不足而提出的策略,它是利用磁盤空間虛擬出的一塊邏輯內(nèi)存,用作虛擬內(nèi)存的磁盤空間被稱為交換空間(Swap Space)。

作為物理內(nèi)存的擴(kuò)展,linux會(huì)在物理內(nèi)存不足時(shí),使用交換分區(qū)的虛擬內(nèi)存,更詳細(xì)的說(shuō),就是內(nèi)核會(huì)將暫時(shí)不用的內(nèi)存塊信息寫到交換空間,這樣以來(lái),物理內(nèi)存得到了釋放,這塊內(nèi)存就可以用于其它目的,當(dāng)需要用到原始的內(nèi)容時(shí),這些信息會(huì)被重新從交換空間讀入物理內(nèi)存。

Linux的內(nèi)存管理采取的是分頁(yè)存取機(jī)制,為了保證物理內(nèi)存能得到充分的利用,內(nèi)核會(huì)在適當(dāng)?shù)臅r(shí)候?qū)⑽锢韮?nèi)存中不經(jīng)常使用的數(shù)據(jù)塊自動(dòng)交換到虛擬內(nèi)存中,而將經(jīng)常使用的信息保留到物理內(nèi)存。

要深入了解linux內(nèi)存運(yùn)行機(jī)制,需要知道下面提到的幾個(gè)方面:

Linux系統(tǒng)會(huì)不時(shí)的進(jìn)行頁(yè)面交換操作,以保持盡可能多的空閑物理內(nèi)存,即使并沒(méi)有什么事情需要內(nèi)存,Linux也會(huì)交換出暫時(shí)不用的內(nèi)存頁(yè)面。這可以避免等待交換所需的時(shí)間。

Linux 進(jìn)行頁(yè)面交換是有條件的,不是所有頁(yè)面在不用時(shí)都交換到虛擬內(nèi)存,linux內(nèi)核根據(jù)”最近最經(jīng)常使用“算法,僅僅將一些不經(jīng)常使用的頁(yè)面文件交換到虛擬 內(nèi)存,有時(shí)我們會(huì)看到這么一個(gè)現(xiàn)象:linux物理內(nèi)存還有很多,但是交換空間也使用了很多。其實(shí),這并不奇怪,例如,一個(gè)占用很大內(nèi)存的進(jìn)程運(yùn)行時(shí),需 要耗費(fèi)很多內(nèi)存資源,此時(shí)就會(huì)有一些不常用頁(yè)面文件被交換到虛擬內(nèi)存中,但后來(lái)這個(gè)占用很多內(nèi)存資源的進(jìn)程結(jié)束并釋放了很多內(nèi)存時(shí),剛才被交換出去的頁(yè)面 文件并不會(huì)自動(dòng)的交換進(jìn)物理內(nèi)存,除非有這個(gè)必要,那么此刻系統(tǒng)物理內(nèi)存就會(huì)空閑很多,同時(shí)交換空間也在被使用,就出現(xiàn)了剛才所說(shuō)的現(xiàn)象了。關(guān)于這點(diǎn),不 用擔(dān)心什么,只要知道是怎么一回事就可以了。

交換空間的頁(yè)面在使用時(shí)會(huì)首先被交換到物理內(nèi)存,如果此時(shí)沒(méi)有足夠的物理內(nèi)存來(lái)容納這些頁(yè) 面,它們又會(huì)被馬上交換出去,如此以來(lái),虛擬內(nèi)存中可能沒(méi)有足夠空間來(lái)存儲(chǔ)這些交換頁(yè)面,最終會(huì)導(dǎo)致linux出現(xiàn)假死機(jī)、服務(wù)異常等問(wèn)題,linux雖 然可以在一段時(shí)間內(nèi)自行恢復(fù),但是恢復(fù)后的系統(tǒng)已經(jīng)基本不可用了。

因此,合理規(guī)劃和設(shè)計(jì)Linux內(nèi)存的使用,是非常重要的。

在Linux 操作系統(tǒng)中,當(dāng)應(yīng)用程序需要讀取文件中的數(shù)據(jù)時(shí),操作系統(tǒng)先分配一些內(nèi)存,將數(shù)據(jù)從磁盤讀入到這些內(nèi)存中,然后再將數(shù)據(jù)分發(fā)給應(yīng)用程序;當(dāng)需要往文件中寫 數(shù)據(jù)時(shí),操作系統(tǒng)先分配內(nèi)存接收用戶數(shù)據(jù),然后再將數(shù)據(jù)從內(nèi)存寫到磁盤上。然而,如果有大量數(shù)據(jù)需要從磁盤讀取到內(nèi)存或者由內(nèi)存寫入磁盤時(shí),系統(tǒng)的讀寫性 能就變得非常低下,因?yàn)闊o(wú)論是從磁盤讀數(shù)據(jù),還是寫數(shù)據(jù)到磁盤,都是一個(gè)很消耗時(shí)間和資源的過(guò)程,在這種情況下,Linux引入了buffers和 cached機(jī)制。

buffers與cached都是內(nèi)存操作,用來(lái)保存系統(tǒng)曾經(jīng)打開過(guò)的文件以及文件屬性信息,這樣當(dāng)操作系統(tǒng)需要讀取某些文件時(shí),會(huì)首先在buffers 與cached內(nèi)存區(qū)查找,如果找到,直接讀出傳送給應(yīng)用程序,如果沒(méi)有找到需要數(shù)據(jù),才從磁盤讀取,這就是操作系統(tǒng)的緩存機(jī)制,通過(guò)緩存,大大提高了操 作系統(tǒng)的性能。但buffers與cached緩沖的內(nèi)容卻是不同的。

buffers是用來(lái)緩沖塊設(shè)備做的,它只記錄文件系統(tǒng)的元數(shù)據(jù)(metadata)以及 tracking in-flight pages,而cached是用來(lái)給文件做緩沖。更通俗一點(diǎn)說(shuō):buffers主要用來(lái)存放目錄里面有什么內(nèi)容,文件的屬性以及權(quán)限等等。而cached直接用來(lái)記憶我們打開過(guò)的文件和程序。

為了驗(yàn)證我們的結(jié)論是否正確,可以通過(guò)vi打開一個(gè)非常大的文件,看看cached的變化,然后再次vi這個(gè)文件,感覺(jué)一下兩次打開的速度有何異同,是不是第二次打開的速度明顯快于第一次呢?接著執(zhí)行下面的命令:

find / -name .conf看看buffers的值是否變化,然后重復(fù)執(zhí)行find命令,看看兩次顯示速度有何不同。

二、linux什么時(shí)候開始使用虛擬內(nèi)存(swap)?

[root@wenwen ~]# cat /proc/sys/vm/swappiness 60

上面這個(gè)60代表物理內(nèi)存在使用40%的時(shí)候才會(huì)使用swap(參考網(wǎng)絡(luò)資料:當(dāng)剩余物理內(nèi)存低于40%(40=100-60)時(shí),開始使用交換空間)swappiness=0的時(shí)候表示最大限度使用物理內(nèi)存,然后才是 swap空間,swappiness=100的時(shí)候表示積極的使用swap分區(qū),并且把內(nèi)存上的數(shù)據(jù)及時(shí)的搬運(yùn)到swap空間里面。

值越大表示越傾向于使用swap。可以設(shè)為0,這樣做并不會(huì)禁止對(duì)swap的使用,只是最大限度地降低了使用swap的可能性。

通常情況下:swap分區(qū)設(shè)置建議是內(nèi)存的兩倍 (內(nèi)存小于等于4G時(shí)),如果內(nèi)存大于4G,swap只要比內(nèi)存大就行。另外盡量的將swappiness調(diào)低,這樣系統(tǒng)的性能會(huì)更好。

B.修改swappiness參數(shù)

Linux內(nèi)存機(jī)制:手動(dòng)釋放Swap、Buffer和Cache

立即生效,重啟也可以生效。

三、怎么釋放內(nèi)存?

一般系統(tǒng)是不會(huì)自動(dòng)釋放內(nèi)存的關(guān)鍵的配置文件/proc/sys/vm/drop_caches。這個(gè)文件中記錄了緩存釋放的參數(shù),默認(rèn)值為0,也就是不釋放緩存。他的值可以為0~3之間的任意數(shù)字,代表著不同的含義:

0 – 不釋放

1 – 釋放頁(yè)緩存

2 – 釋放dentries和inodes

3 – 釋放所有緩存

實(shí)操:

很明顯多出來(lái)很多空閑的內(nèi)存了吧

四、怎么釋放swap?

前提:首先要保證內(nèi)存剩余要大于等于swap使用量,否則會(huì)宕機(jī)!根據(jù)內(nèi)存機(jī)制,swap分區(qū)一旦釋放,所有存放在swap分區(qū)的文件都會(huì)轉(zhuǎn)存到物理內(nèi)存上。通常通過(guò)重新掛載swap分區(qū)完成釋放swap。

a.查看當(dāng)前swap分區(qū)掛載在哪?b.關(guān)停這個(gè)分區(qū)c.查看狀態(tài):d.查看swap分區(qū)是否關(guān)停,最下面一行顯示全e.將swap掛載到/dev/sda5上f.查看掛載是否成功

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • Linux
    +關(guān)注

    關(guān)注

    87

    文章

    11210

    瀏覽量

    208721
  • 內(nèi)存
    +關(guān)注

    關(guān)注

    8

    文章

    2976

    瀏覽量

    73815
  • SWAP
    +關(guān)注

    關(guān)注

    0

    文章

    51

    瀏覽量

    12777
  • 虛擬機(jī)
    +關(guān)注

    關(guān)注

    1

    文章

    904

    瀏覽量

    28018
  • 華秋DFM
    +關(guān)注

    關(guān)注

    20

    文章

    3492

    瀏覽量

    4345
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    Cache內(nèi)存有什么區(qū)別

    Cache(高速緩存)和內(nèi)存(Memory,通常指主存儲(chǔ)器或RAM)是計(jì)算機(jī)存儲(chǔ)系統(tǒng)中兩個(gè)重要的組成部分,它們?cè)谟?jì)算機(jī)的性能和數(shù)據(jù)處理中扮演著不同的角色。以下是對(duì)Cache內(nèi)存之間區(qū)
    的頭像 發(fā)表于 09-26 15:28 ?794次閱讀

    Linux內(nèi)核中的頁(yè)面分配機(jī)制

    Linux內(nèi)核中是如何分配出頁(yè)面的,如果我們站在CPU的角度去看這個(gè)問(wèn)題,CPU能分配出來(lái)的頁(yè)面是以物理頁(yè)面為單位的。也就是我們計(jì)算機(jī)中常講的分頁(yè)機(jī)制。本文就看下Linux內(nèi)核是如何管理,釋放
    的頭像 發(fā)表于 08-07 15:51 ?214次閱讀
    <b class='flag-5'>Linux</b>內(nèi)核中的頁(yè)面分配<b class='flag-5'>機(jī)制</b>

    ESP32CE MQTT斷線重連后內(nèi)存釋放怎么解決?

    idf v5.2.1 開啟mqtt 連接手機(jī)wifi 然后關(guān)閉數(shù)據(jù)流量和打開數(shù)據(jù)流量(模擬網(wǎng)絡(luò)超時(shí))esp_get_free_heap_size 獲取到的內(nèi)存越來(lái)越小 ,只有wifi重連才會(huì)釋放
    發(fā)表于 07-19 07:12

    深入理解Java 8內(nèi)存管理機(jī)制及故障排查實(shí)戰(zhàn)指南

    Java的自動(dòng)內(nèi)存管理機(jī)制是由 JVM 中的垃圾收集器來(lái)實(shí)現(xiàn)的,垃圾收集器會(huì)定期掃描堆內(nèi)存中的對(duì)象,檢測(cè)并清除不再使用的對(duì)象,以釋放內(nèi)存資源
    的頭像 發(fā)表于 04-04 08:10 ?955次閱讀
    深入理解Java 8<b class='flag-5'>內(nèi)存</b>管理<b class='flag-5'>機(jī)制</b>及故障排查實(shí)戰(zhàn)指南

    淺談硅除雜工藝中的分凝機(jī)制釋放機(jī)制

    分凝吸雜由雜質(zhì)的溶解度梯度或硅片不同區(qū)域?qū)﹄s質(zhì)的溶解能力不同產(chǎn)生。與釋放機(jī)制不同,分凝吸雜,吸雜區(qū)一般都在器件區(qū)的外邊。
    的頭像 發(fā)表于 04-01 12:47 ?762次閱讀

    STM32h7開啟Cache后,串口發(fā)送DMA會(huì)導(dǎo)致中斷觸發(fā)如何解決?

    STM32h7 開啟Cache后,串口使用發(fā)送DMA發(fā)送數(shù)據(jù)會(huì)導(dǎo)致中斷觸發(fā)(只開啟接收空閑中斷),接收和發(fā)送的緩存指定在手動(dòng)分配的內(nèi)存區(qū)域(此區(qū)域通過(guò)MPU配置,關(guān)閉了Cache功能)
    發(fā)表于 03-12 07:37

    Linux內(nèi)核內(nèi)存管理之內(nèi)核非連續(xù)物理內(nèi)存分配

    的主要優(yōu)點(diǎn)是避免了外部碎片,而缺點(diǎn)是需要修改內(nèi)核頁(yè)表。顯然,非連續(xù)內(nèi)存區(qū)域的大小必須是4096的倍數(shù)。Linux使用非連續(xù)物理內(nèi)存區(qū)的場(chǎng)景有幾種:(1)為swap區(qū)分配數(shù)據(jù)結(jié)構(gòu);(2)
    的頭像 發(fā)表于 02-23 09:44 ?843次閱讀
    <b class='flag-5'>Linux</b>內(nèi)核<b class='flag-5'>內(nèi)存</b>管理之內(nèi)核非連續(xù)物理<b class='flag-5'>內(nèi)存</b>分配

    Linux內(nèi)核內(nèi)存管理架構(gòu)解析

    內(nèi)存管理子系統(tǒng)可能是linux內(nèi)核中最為復(fù)雜的一個(gè)子系統(tǒng),其支持的功能需求眾多,如頁(yè)面映射、頁(yè)面分配、頁(yè)面回收、頁(yè)面交換、冷熱頁(yè)面、緊急頁(yè)面、頁(yè)面碎片管理、頁(yè)面緩存、頁(yè)面統(tǒng)計(jì)等,而且對(duì)性能也有很高
    的頭像 發(fā)表于 01-04 09:24 ?619次閱讀
    <b class='flag-5'>Linux</b>內(nèi)核<b class='flag-5'>內(nèi)存</b>管理架構(gòu)解析

    深入理解Linux RCU:從硬件說(shuō)起之內(nèi)存屏障

    上一篇文章我們談到了內(nèi)存Cache,并且描述了典型的Cache一致性協(xié)議MESI。Cache的根本目的,是解決內(nèi)存與CPU速度多達(dá)兩個(gè)數(shù)量級(jí)
    的頭像 發(fā)表于 12-25 13:42 ?757次閱讀
    深入理解<b class='flag-5'>Linux</b> RCU:從硬件說(shuō)起之<b class='flag-5'>內(nèi)存</b>屏障

    buffercache的區(qū)別

    buffercache的區(qū)別 緩沖區(qū)(Buffer)和緩存(Cache)是計(jì)算機(jī)系統(tǒng)中用于提高數(shù)據(jù)讀寫效率的兩個(gè)關(guān)鍵概念,它們雖然功能有所重疊,但在實(shí)際應(yīng)用中存在一些差異。在下文中,
    的頭像 發(fā)表于 12-07 11:00 ?782次閱讀

    如何在Ubuntu Linux釋放/boot分區(qū)中的空間

    在Ubuntu Linux上,/boot分區(qū)是用于存儲(chǔ)啟動(dòng)相關(guān)的文件的。隨著時(shí)間的推移,這個(gè)分區(qū)可能會(huì)變滿,導(dǎo)致系統(tǒng)無(wú)法安裝新的內(nèi)核和更新。本文將介紹如何釋放/boot分區(qū)中的空間,并提供詳細(xì)的步驟。
    的頭像 發(fā)表于 11-28 10:04 ?823次閱讀

    linux手動(dòng)設(shè)置網(wǎng)絡(luò)參數(shù)

    Linux 是一種廣泛使用的操作系統(tǒng),提供了豐富的網(wǎng)絡(luò)配置選項(xiàng),允許用戶手動(dòng)設(shè)置網(wǎng)絡(luò)參數(shù),以滿足各種網(wǎng)絡(luò)需求。本文將詳盡、詳實(shí)、細(xì)致地介紹 Linux手動(dòng)設(shè)置網(wǎng)絡(luò)參數(shù)的方法,包括
    的頭像 發(fā)表于 11-27 15:20 ?657次閱讀

    java內(nèi)存溢出的幾種原因和解決辦法

    Java是一種使用垃圾回收機(jī)制的編程語(yǔ)言,由于自動(dòng)內(nèi)存管理機(jī)制的存在,Java程序中發(fā)生內(nèi)存溢出(Out of Memory)錯(cuò)誤的情況相對(duì)較少。然而,雖然Java垃圾回收器負(fù)責(zé)
    的頭像 發(fā)表于 11-23 14:44 ?5959次閱讀

    如何在linux系統(tǒng)配置交換分區(qū)(swap)呢?

    SWAP(交換)分區(qū)是一種通過(guò)在硬盤中預(yù)先劃分一定的空間,然后將把內(nèi)存中暫時(shí)不常用的數(shù)據(jù)臨時(shí)存放到硬盤中
    的頭像 發(fā)表于 11-14 09:57 ?1388次閱讀
    如何在<b class='flag-5'>linux</b>系統(tǒng)配置交換分區(qū)(<b class='flag-5'>swap</b>)呢?

    查看Linux系統(tǒng)內(nèi)存使用情況的幾種方法

    Linux系統(tǒng)中,內(nèi)存監(jiān)控是優(yōu)化系統(tǒng)性能的關(guān)鍵。本文為你介紹12種方法,幫助你全面掌握Linux系統(tǒng)的內(nèi)存使用情況。這些方法包括查看/proc/meminfo、使用atop、free
    的頭像 發(fā)表于 11-13 09:30 ?1.3w次閱讀
    查看<b class='flag-5'>Linux</b>系統(tǒng)<b class='flag-5'>內(nèi)存</b>使用情況的幾種方法