0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

什么是內存管理?如何進行內存管理?及內存管理的方案與分析

Q4MP_gh_c472c21 ? 來源:嵌入式云IOT技術圈 ? 作者:嵌入式云IOT技術圈 ? 2021-03-26 13:38 ? 次閱讀

前面已經將所有的硬件驅動實現(xiàn),驗證了硬件功能。但是每一個硬件都是單獨測試的,而且并不完善。下一步,我們需要對各個驅動進行整合完善。在整合之前,需要做一些基礎工作。其中之一就是實現(xiàn)內存管理。什么叫內存管理呢?為什么要做內存管理?前面我們已經大概了解了程序中的變量現(xiàn)在我們復習一下:局部變量、全局變量。

局部變量在進入函數(shù)時從棧空間分配,退出函數(shù)前釋放。全局變量則在整個程序運行其中一直使用。在程序編譯時就已經分配了RAM空間。

那還有沒有第三種變量呢?可以說沒有。但是如果從生存周期上看,是有的:一個變量,在多個函數(shù)內使用,但是又不是整個程序運行期間都使用?;颍阂粋€變量,在一段時間內使用,不是整個程序運行生命周期都要用,但是用這個變量的函數(shù)會退出,然后重復進入(用static定義的局部變量相當于全局變量)

如果不使用動態(tài)內存管理,這樣的變量就只能定義為全局變量。如果將這些變量定義為指針,當要使用時,通過內存管理分配,使用完后就釋放,這就叫做動態(tài)分配。舉個實際的例子:

一個設備,有三種通信方式:串口,USB,網絡,在通信過程每個通信方式需要1K RAM。經過分析,3種通信方式不會同時使用。那么,如果不使用動態(tài)內存,則需要3K變量。如果使用內存管理動態(tài)分配,則只需要1K內存就可以了。(這個只是舉例,如果簡單的系統(tǒng),確定三種方式不同時使用,可以直接復用內存)

通信方式只是舉例,其實一個系統(tǒng)中,并不是所有設備都一直使用,如果使用動態(tài)內存管理,RAM的峰值用量將會大大減少。

內存管理方案

不發(fā)明車輪,只優(yōu)化輪胎。

內存管理是編程界的一個大話題,有很多經典的方案。很多人也在嘗試寫新的方案。內存分配模塊我們使用K&R C examples作為基礎,然后進行優(yōu)化。K&R是誰?就是寫《C程序設計語言》的兩個家伙。如果你沒有這本書,真遺憾。這本書的8.7章節(jié),《實例--存儲分配程序》,介紹了一種基本的存儲分配方法。代碼見alloc.c,整個代碼只有120行,而且結構很美。

K&R 內存管理方案分析

下面我們結合代碼分析這種內存分配方案。代碼在wujiqueUtilitiesalloc文件夾。

內存分析

初始化

在malloc函數(shù)中,如果是第一次調用就會初始化內存鏈表。代碼原來是通過獲取堆地址,在堆上建立內存池。我們把他改為更直觀的數(shù)組定義方式。內存建立后的內存視圖如下:

27ce31e6-8dcc-11eb-8b86-12bb97331649.png

內存分配的最小單元是:

typedef struct ALLOC_HDR{ struct{ struct ALLOC_HDR *ptr; unsigned int size;/*本塊內存容量*/} s; unsigned int align; unsigned int pad;} ALLOC_HDR;

這也就是內存管理結構體。在32位ARM系統(tǒng)上,這個結構體是16字節(jié)。

第一次分配

每次分配,就是在一塊可以分配的空間尾部切割一塊出來,切割的大小是16字節(jié)的倍數(shù),而且會比需要的內存多一塊頭。這塊頭在內存釋放時需要使用。這一塊,也就是內存管理的開銷。

27fe35f8-8dcc-11eb-8b86-12bb97331649.png

分配釋放后

經過多次分配釋放后,內存可能如下圖,綠色是兩塊不連續(xù)的空閑塊,黃色是分配出去的塊。分配出去的塊,已經不在內存鏈表里面。

283eaa8e-8dcc-11eb-8b86-12bb97331649.png

缺點

一般情況上面的代碼已經能滿足需求。但是,有以下缺陷:

缺點1:容易碎片化

分配使用首次適應法,也即是找到一塊大于等于要分配內存的空閑塊,立刻進行分配。這種方法的優(yōu)點是速度較快,缺點是容易內存碎片化,分配時將很多大塊內存切割成小內存了。經過多次分配后,很可能出現(xiàn)以下情況:

空閑內存總量還有10K,但是卻被分散在10個塊內,而且沒有大容量的內存塊,再申請2K內存就出現(xiàn)失敗。如果對時間并不是那么敏感,我們可以使用最適合法,也即是遍歷空閑鏈表,查找一個最合適的內存(大于要分配內存且容量最小的空閑塊),減少大內存被切碎的概率。需要注意的是,最適合法,除了會增加分配時間,不會減少內存碎片數(shù)量,只是增加了空閑內存的集中度。假設經過多次分配后,空閑總量還是10K,也是分散在10個空閑塊,但是在這10個空閑塊中,會有5K的大塊,再申請2K的時候,就可以申請到2K內存了。

缺點2:內存消耗

內存分配方案使用了一個結構體,每次分配的最小單位就是這個結構體的大小16字節(jié)。

typedef struct ALLOC_HDR{ struct{ struct ALLOC_HDR *ptr; unsigned int size;/*本塊內存容量*/} s; unsigned int align; unsigned int pad;} ALLOC_HDR;

一次分配,最少就是2個結構體(一個結構體用于管理分配出去的內存,其余結構體做為申請內存),也就是32字節(jié)。如果代碼有大量小內存申請,例如申請100次8個字節(jié)

需求內存:100X8=800字節(jié)實際消耗內存100X32 = 3200字節(jié)利用率只有800/3200 =25%

如果內存分配只有25%的使用率,對于小內存嵌入式設備來說,是致命的方案缺陷。

如何解決呢?我們可以參考LINUX內存分配方案SLAB。在LINUX中,有很多模塊需要申請固定大小的內存(例如node結構體),為了加快分配速度,系統(tǒng)會使用malloc先從大內存池中申請一批node結構體大小的內存,作為一個slab內存池。當需要分配node結構體時,就直接從slab內存池申請。同理,可以將內存分配優(yōu)化為:需要小內存時,從大塊內存池分配一塊大內存,例如512,使用新算法管理,用于小內存分配。當512消耗盡,再從大內存池申請第二塊512字節(jié)大內存。當小內存釋放時,判斷小塊內存池是否為空,如為空,將小塊內存池釋放回大內存池。那如何管理這個小內存池呢?

缺點3:沒有管理已分配內存

內存分配沒有將已分配內存管理起來。我們可以對已分配內存進行統(tǒng)一管理:

1 已分配內存在頭部有原來的結構體,通過ptr指針,將所有已分配內存連接在已分配鏈表上。2 利用不使用的align跟pad成員,記錄分配時間跟分配對象(記錄哪個驅動申請的內存)

通過上面優(yōu)化后,就可以統(tǒng)計已經分配了多少內存,還有多少空閑內存,哪個模塊申請了最多內存等數(shù)據。

使用

1 將代碼中的所有free改為為wjq_free,malloc改為wjq_malloc。

串口緩沖用了free跟malloc.fatfs的syscall.c 用了lwip的mem.h用了。

2 修改啟動代碼, 棧跟堆改小。不用庫的malloc,堆可以完全不要。棧,還是要保留,但是不需要那么大,如果函數(shù)內用到比較大的局部變量,改為動態(tài)申請。

Stack_Size EQU 0x00002000

AREA STACK, NOINIT, READWRITE, ALIGN=3Stack_Mem SPACE Stack_Size__initial_sp

; 《h》 Heap Configuration; 《o》 Heap Size (in Bytes) 《0x0-0xFFFFFFFF:8》; 《/h》

Heap_Size EQU 0x00000010

AREA HEAP, NOINIT, READWRITE, ALIGN=3__heap_baseHeap_Mem SPACE Heap_Size__heap_limit

3 內存池開了80K,編譯不過

linking.。..Objectswujique.axf: Error: L6406E: No space in execution regions with .ANY selector matching dev_touchscreen.o(.bss)。.Objectswujique.axf: Error: L6406E: No space in execution regions with .ANY selector matching mcu_uart.o(.bss)。.Objectswujique.axf: Error: L6406E: No space in execution regions with .ANY selector matching etharp.o(.bss)。.Objectswujique.axf: Error: L6406E: No space in execution regions with .ANY selector matching mcu_can.o(.bss)。.Objectswujique.axf: Error: L6406E: No space in execution regions with .ANY selector matching netconf.o(.bss)。先把內存池改小,編譯通過之后,分析 map文件,用了較多全局變量的統(tǒng)統(tǒng)改小或者改為動態(tài)申請。分析map文件,還可以檢查還有沒有使用庫里面的malloc。Code (inc. data) RO Data RW Data ZI Data Debug Object Name 124 32 0 4 40976 1658 alloc.o 16 0 0 0 0 2474 def.o 96 34 8640 4 0 1377 dev_dacsound.o 300 36 0 0 0 2751 dev_esp8266.o 204 38 0 1 0 1446 dev_key.o 436 98 0 10 16 3648 dev_touchkey.o 310 18 0 14 3000 3444 dev_touchscreen.o 932 18 0 4 0 15981 dhcp.o 0 0 0 0 3964 5933 dual_func_demo.o 280 14 12 0 200 5963 etharp.o 0 0 0 0 0 35864 ethernetif.o 0 0 0 0 0 3820 inet.o 98 0 0 0 0 2022 inet_chksum.o 0 0 0 0 0 4163 init.o 168 4 0 20 0 4763 ip.o 0 0 4 0 0 6463 ip_addr.o 386 4 0 0 0 4118 ip_frag.o 264 38 0 8 16 383399 main.o 84 8 0 0 0 1410 mcu_adc.o 60 32 0 1 68 1511 mcu_can.o 12 0 0 0 0 521 mcu_dac.o 128 14 0 0 0 2352 mcu_i2c.o 28 8 0 1 0 630 mcu_i2s.o 336 92 0 0 0 2689 mcu_rtc.o 430 86 0 1 0 4396 mcu_timer.o 1564 82 0 0 328 9072 mcu_uart.o 504 20 0 12 0 4510 mem.o 56 10 0 0 9463 3250 memp.o 120 14 0 0 0 1651 misc.o 0 0 0 0 56 1066 netconf.o 118 0 0 0 0 4267 netif.o 684 0 0 0 0 6971 pbuf.o 36 8 392 0 8192 824 startup_stm32f40_41xxx.o

alloc.o 內存池dev_touchscreen.o 觸摸屏緩沖dual_func_demo.o USB,應該能優(yōu)化memp.o 什么鬼?又一個內存池?應該是要優(yōu)化掉startup_stm32f40_41xxx.o 啟動代碼,是棧跟堆用的RAM.

由于編譯器的優(yōu)化,項目沒用到的代碼沒有編譯進來,上面的map數(shù)據并不完整。等后面我們做完全部測試程序,所有用到的代碼都會參與連接,到時還需要優(yōu)化一次。

總結

內存管理暫時到此,等后面所有功能都完成后,再進行一次優(yōu)化。如果對內存分配時間有更高要求,可使用伙伴內存分配法。
編輯:lyn

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 代碼
    +關注

    關注

    30

    文章

    4722

    瀏覽量

    68236
  • 內存管理
    +關注

    關注

    0

    文章

    168

    瀏覽量

    14117

原文標題:深度:產品級的MCU是如何進行內存管理的?

文章出處:【微信號:gh_c472c2199c88,微信公眾號:嵌入式微處理器】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    Linux內存泄露案例分析內存管理分享

    作者:京東科技 李遵舉 一、問題 近期我們運維同事接到線上LB(負載均衡)服務內存報警,運維同事反饋說LB集群有部分機器的內存使用率超過80%,有的甚至超過90%,而且內存使用率還再不停的增長。接到
    的頭像 發(fā)表于 10-24 16:14 ?648次閱讀
    Linux<b class='flag-5'>內存</b>泄露案例<b class='flag-5'>分析</b>和<b class='flag-5'>內存</b><b class='flag-5'>管理</b>分享

    Linux內存管理中HVO的實現(xiàn)原理

    代碼閱讀工具:vim+ctags+cscope本文主要介紹內存管理中的HVO(HugeTLB Vmemmap Optimization)特性,通過HVO可以節(jié)省管理HugeTLB 頁面元數(shù)據
    的頭像 發(fā)表于 10-22 16:51 ?157次閱讀
    Linux<b class='flag-5'>內存</b><b class='flag-5'>管理</b>中HVO的實現(xiàn)原理

    Windows管理內存的三種主要方式

    Windows操作系統(tǒng)提供了多種方式來管理內存,以確保系統(tǒng)資源的有效利用和性能的優(yōu)化。以下是關于Windows管理內存的三種主要方式的詳細闡述,包括堆
    的頭像 發(fā)表于 10-12 17:09 ?318次閱讀

    內存管理的硬件結構

    常見的內存分配函數(shù)有malloc,mmap等,但大家有沒有想過,這些函數(shù)在內核中是怎么實現(xiàn)的?換句話說,Linux內核的內存管理是怎么實現(xiàn)的?
    的頭像 發(fā)表于 09-04 14:28 ?220次閱讀
    <b class='flag-5'>內存</b><b class='flag-5'>管理</b>的硬件結構

    ESP-IDF內核中的內存管理如何驗證?

    請教一下,ESP-IDF 內核中的內存管理如何驗證
    發(fā)表于 06-19 06:30

    C語言中的動態(tài)內存管理講解

    本章將講解 C 中的動態(tài)內存管理。C 語言為內存的分配和管理提供了幾個函數(shù)。這些函數(shù)可以在 頭文件中找到。
    的頭像 發(fā)表于 02-23 14:03 ?360次閱讀
    C語言中的動態(tài)<b class='flag-5'>內存</b><b class='flag-5'>管理</b>講解

    系統(tǒng)內存和運行內存的區(qū)別

    系統(tǒng)內存和運行內存都是計算機中重要的概念,它們在計算機的存儲和運行方面起著不可或缺的作用。雖然它們與計算機存儲和運行息息相關,但是它們具有不同的功能和實現(xiàn)方式。接下來我將詳細介紹系統(tǒng)內存和運
    的頭像 發(fā)表于 01-15 16:32 ?2946次閱讀

    Linux內核內存管理架構解析

    的要求。本文從內存管理硬件架構、地址空間劃分和內存管理軟件架構三個方面入手,嘗試對內存管理的軟硬
    的頭像 發(fā)表于 01-04 09:24 ?619次閱讀
    Linux內核<b class='flag-5'>內存</b><b class='flag-5'>管理</b>架構解析

    段式存儲管理和頁式存儲管理的區(qū)別

    段式存儲管理和頁式存儲管理是操作系統(tǒng)中兩種常見的內存管理技術,它們在物理內存的分配和管理上有著顯
    的頭像 發(fā)表于 12-30 17:17 ?4404次閱讀
    段式存儲<b class='flag-5'>管理</b>和頁式存儲<b class='flag-5'>管理</b>的區(qū)別

    jvm管理內存包括哪幾個運行時數(shù)據內存

    JVM(Java虛擬機)是Java程序的運行環(huán)境,它提供了內存管理機制來管理Java程序所需的運行時數(shù)據內存。這些運行時數(shù)據內存包括堆
    的頭像 發(fā)表于 12-05 14:09 ?511次閱讀

    內存管理單元的重要功能是什么

    微觀理解 內存管理單元(MMU)的一個重要功能是使系統(tǒng)能夠運行多個任務,作為獨立的程序運行在他們自己的 私有虛擬內存空間。 它們不需要了解系統(tǒng)的物理內存圖,即硬件實際使用的地址,也不需
    的頭像 發(fā)表于 11-26 15:36 ?615次閱讀
    <b class='flag-5'>內存</b><b class='flag-5'>管理</b>單元的重要功能是什么

    MMU內存管理單元的宏觀理解

    最近一直在學習內存管理,也知道MMU是管理內存的映射的邏輯IP,還知道里面有個TLB。 今天剛剛好看到了幾篇前輩的文章,很是不錯,于是這里來一起學習一下吧。 PART 一:MMU 架構
    的頭像 發(fā)表于 11-26 15:21 ?526次閱讀
    MMU<b class='flag-5'>內存</b><b class='flag-5'>管理</b>單元的宏觀理解

    nginx內存池源碼設計

    造輪子內存池原因引入 作為C/C++程序員, 相較JAVA程序員的一個重大特征是我們可以直接訪問內存, 自己管理內存, 這個可以說是我們的特色, 也是我們的苦楚了. java可以有虛擬
    的頭像 發(fā)表于 11-13 11:51 ?662次閱讀
    nginx<b class='flag-5'>內存</b>池源碼設計

    C++內存管理問題

    寫服務端的,內存是一個繞不過的問題,而用C++寫的,這個問題就顯得更嚴重。進程的內存持續(xù)上漲,有可能是正常的內存占用,也有可能是內存碎片,而C++寫的,還有可能是
    的頭像 發(fā)表于 11-13 11:13 ?604次閱讀
    C++<b class='flag-5'>內存</b><b class='flag-5'>管理</b>問題

    基于FreeRTOS的STM32F103系統(tǒng)—內存管理及任務調度

    雖然現(xiàn)在的單片機系統(tǒng),CPU的資源并不是那么緊缺了,也有豐富的內存空間,但是我們還是要積極地實現(xiàn)內存管理,這可以幫我們減少內存資源的占用,優(yōu)化程序,提高效率。
    的頭像 發(fā)表于 11-13 11:08 ?1457次閱讀
    基于FreeRTOS的STM32F103系統(tǒng)—<b class='flag-5'>內存</b><b class='flag-5'>管理</b>及任務調度