0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

嵌入式如何與AI相結(jié)合,什么是端側(cè)AI~

朱老師物聯(lián)網(wǎng)大講堂 ? 2023-06-21 17:28 ? 次閱讀

什么叫端測(cè)AI

這個(gè)問(wèn)題搞清楚之前,大家必須要去了解我們整個(gè)計(jì)算機(jī)行業(yè)的一個(gè)系統(tǒng)架構(gòu),它的發(fā)展方向是云·邊·端協(xié)同,也就是未來(lái)各行各業(yè),不管做啥的,與計(jì)算機(jī)行業(yè)相關(guān)的這種硬件和軟件架構(gòu),它都會(huì)往這個(gè)方向去發(fā)展,所謂的云邊端協(xié)同。那么是怎么個(gè)云邊端協(xié)同法呢?首先我們要知道這幾個(gè)關(guān)鍵字的意思,云就是云計(jì)算,邊就是邊緣計(jì)算,端就是設(shè)備端。設(shè)備端一般就是拿在用戶手里的、放在用戶桌子上的、裝在用戶家里面的、其實(shí)就是跟用戶直接相關(guān)的這一端,我們叫端;邊是邊緣計(jì)算,那什么叫邊緣計(jì)算,這個(gè)其實(shí)很好理解,譬如說(shuō)裝在你們小區(qū)里面的、裝在你們公司那棟樓里面的,對(duì)于你來(lái)說(shuō),這就叫邊緣計(jì)算;所以其實(shí)就是:云端指的是離你很遠(yuǎn)的設(shè)備,邊緣端就是離你很近的云端,端呢就是你自己的設(shè)備,所以云邊端加起來(lái)就構(gòu)成了我們整個(gè)的計(jì)算機(jī)架構(gòu)。所以呢,在未來(lái)你開(kāi)發(fā)硬件的時(shí)候,你開(kāi)發(fā)的要么就是云端的硬件,要么就是邊緣端的硬件,要么就是設(shè)備端,就所謂的端測(cè)的硬件。那么你開(kāi)發(fā)軟件也是一樣,要么就是云端的軟件,要么就是邊緣端的軟件,要么就是設(shè)備端的軟件。

那么AI也是一樣,我們把AI這種技術(shù)應(yīng)用在云端和邊緣計(jì)算端和設(shè)備端,那么就構(gòu)成了所謂的云端AI,邊緣計(jì)算的AI以及設(shè)備端的AI,所以端測(cè)AI,其實(shí)指的就是設(shè)備端的AI。那我們作為嵌入式工程師為什么需要關(guān)注端側(cè)AI而不是云端的AI和邊緣的端的AI呢?這個(gè)是有原因的,首先第一個(gè)云端的AI呢,就是類似于那種像這個(gè)“小度小度”這類東西?比如說(shuō)像這個(gè)“小度”音箱,它的實(shí)現(xiàn)原理,其實(shí)就是你在這邊說(shuō)的話,它這個(gè)音箱其實(shí)是一個(gè)錄音設(shè)備,把你說(shuō)的話呢錄下來(lái),然后把你這段語(yǔ)音直接傳到百度的服務(wù)器上去,所以音箱本身是不會(huì)做語(yǔ)音識(shí)別的,那百度的云服務(wù)器端有一個(gè)模型,就在那里做這個(gè)語(yǔ)言的一個(gè)處理和語(yǔ)言的識(shí)別,識(shí)別出來(lái)之后把結(jié)果再回傳到音響,所以呢,像這種“小度”音箱的這種產(chǎn)品,它其實(shí)就是典型的云端智能,就是云端AI,那這種產(chǎn)品跟我們嵌入式有關(guān)系嗎?其實(shí)關(guān)系并不大,因?yàn)橐粋€(gè)普通的音箱跟一個(gè)“小度”音箱這種智能音箱幾乎沒(méi)有區(qū)別,你可以認(rèn)為,因?yàn)樗腁I并不在設(shè)備端,嵌入式端根本就不需要AI設(shè)備,所以說(shuō)呢,云端AI跟嵌入式開(kāi)發(fā)幾乎沒(méi)有關(guān)系,所以云端AI不該我們管。那么邊緣計(jì)算的AI跟我們有關(guān)系嗎?有,因?yàn)檫吘売?jì)算,還是有那么一點(diǎn)嵌入式開(kāi)發(fā)在的,但是目前來(lái)說(shuō),邊緣計(jì)算這個(gè)東西還是概念比較多,實(shí)際落地的非常少,而且邊緣計(jì)算本身還在發(fā)展當(dāng)中。根據(jù)目前邊緣計(jì)算的最新技術(shù)發(fā)展方向,實(shí)際上將來(lái)是更像云端,而不太像設(shè)備端,也就是說(shuō)邊緣端其實(shí)就是一個(gè)簡(jiǎn)化的云端,你可以理解為就是一個(gè)簡(jiǎn)化的本地處理過(guò)的云端。所以呢,邊緣計(jì)算一方面是當(dāng)前用的很少,幾乎沒(méi)什么落地,另一方面來(lái)說(shuō)呢,它跟云端更像,所以我們作為嵌入式工程師就沒(méi)必要碰它。

那對(duì)于我們嵌入式開(kāi)發(fā)者來(lái)說(shuō),AI跟我們關(guān)系最大的是什么?那就是所謂的設(shè)備端的AI,也就是我們所謂的端測(cè)AI,那端側(cè)AI的概念就是整個(gè)的AI的過(guò)程全部是發(fā)生在設(shè)備端的。舉個(gè)例子,比如說(shuō)我現(xiàn)在做一個(gè)人臉識(shí)別,我的設(shè)備端攝像頭負(fù)責(zé)拍照,拍完照之后把圖像傳給我設(shè)備端的CPU,然后設(shè)備端這邊的硬件和軟件負(fù)責(zé)調(diào)用AI做數(shù)據(jù)處理,進(jìn)而來(lái)做人臉識(shí)別,最后把結(jié)果在我的設(shè)備端展示出來(lái),進(jìn)行開(kāi)鎖、報(bào)警等動(dòng)作執(zhí)行。整個(gè)AI的過(guò)程都在設(shè)備端,根本就不會(huì)去連接云,也不會(huì)去連接邊緣,這樣來(lái)做有兩個(gè)最大的好處,第一個(gè)好處就是速度快,不用聯(lián)網(wǎng)就不受網(wǎng)絡(luò)的限制,所以速度快。第二個(gè)好處就是因?yàn)椴挥寐?lián)網(wǎng)所以低功耗。第三個(gè)最重要的一點(diǎn)就是隱私問(wèn)題,不會(huì)把照片等私密數(shù)據(jù)上傳云端,現(xiàn)場(chǎng)拍現(xiàn)場(chǎng)用,用完之后銷毀,這樣是比較安全的。所以說(shuō)基于這三個(gè)原因,當(dāng)然還有別的一些原因,端測(cè)AI實(shí)際上在未來(lái)的應(yīng)用是很廣泛的,而且端測(cè)AI本身跟嵌入式開(kāi)發(fā)的關(guān)系非常大,那咱們做嵌入式開(kāi)發(fā)的,就需要去關(guān)心端測(cè)AI,去搞端側(cè)AI,去掌握這方面的技術(shù),成為一個(gè)可以結(jié)合AI人工智能技術(shù)的更有發(fā)展的一名嵌入式軟件工程師。再額外介紹一點(diǎn),目前國(guó)內(nèi)外,在端側(cè)AI方向上有所建樹(shù)的企業(yè)和芯片廠商有:ST(NanoEdgeAIStudio、CubeAI)、NXPMCU:imxRT10xx、MPU+linuximx8、imx9352)、聆思(科大訊飛的芯片公司),英偉達(dá),谷歌以及我們熟悉的ARM,我們需要做的就是從最簡(jiǎn)單的端側(cè)AI項(xiàng)目開(kāi)始,嘗試讓自己去熟悉和去體會(huì)端側(cè)AI相關(guān)的嵌入式項(xiàng)目開(kāi)發(fā),逐步尋找新技術(shù)形態(tài)和新技術(shù)方向上的更多機(jī)會(huì),并尋求進(jìn)一步發(fā)展。

所以今天給大家推薦我們第一個(gè)端側(cè)AI方向的性價(jià)比超高的企業(yè)級(jí)實(shí)戰(zhàn)項(xiàng)目~

讓大家用非常低的成本來(lái)接觸AI人工智能開(kāi)發(fā),做自己第一個(gè)端側(cè)AI項(xiàng)目。

03c9c00c-1016-11ee-a579-dac502259ad0.gif

03d6277a-1016-11ee-a579-dac502259ad0.png03df9a58-1016-11ee-a579-dac502259ad0.png

項(xiàng)目名稱:端側(cè)AI異常振動(dòng)檢測(cè)

第一視角做項(xiàng)目

項(xiàng)目介紹

本項(xiàng)目使用STM32單片機(jī)和三軸加速度傳感器,實(shí)現(xiàn)了一個(gè)異常振動(dòng)檢測(cè)功能,該產(chǎn)品可用于風(fēng)扇、水泵、工業(yè)電機(jī)等產(chǎn)品的預(yù)測(cè)性維護(hù)場(chǎng)景,譬如將本項(xiàng)目實(shí)現(xiàn)的模塊固定在工業(yè)風(fēng)扇上,當(dāng)風(fēng)扇出現(xiàn)異常(如風(fēng)葉變形、風(fēng)路阻擋、形變導(dǎo)致的剮蹭等)時(shí)該模塊可實(shí)時(shí)發(fā)現(xiàn)并報(bào)警。


適合人群

有一些單片機(jī)和C語(yǔ)言基礎(chǔ),對(duì)做實(shí)戰(zhàn)項(xiàng)目感興趣,對(duì)積累項(xiàng)目經(jīng)驗(yàn)感興趣,對(duì)嵌入式項(xiàng)目規(guī)劃和管理感興趣,想要學(xué)會(huì)如何實(shí)戰(zhàn)做項(xiàng)目的人。

項(xiàng)目核心技術(shù)

1.AI人工智能:機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、監(jiān)督學(xué)習(xí)、分類學(xué)習(xí)、數(shù)據(jù)集、訓(xùn)練、模型2.端側(cè)AI:端側(cè)AI理論、ST端側(cè)AI解決方案、NanoEdgeAIStudio工具3.AI項(xiàng)目開(kāi)發(fā)技能:數(shù)據(jù)收集、算法選取和模型訓(xùn)練、項(xiàng)目集成4.STM32技術(shù)棧:STM32CubeMX、HAL庫(kù)開(kāi)發(fā)、Keil MDK5.常用外設(shè):三軸加速度傳感器

  • 學(xué)完收益(可以體現(xiàn)在簡(jiǎn)歷中的核心內(nèi)容)

1.快速掌握帶AI功能的單片機(jī)項(xiàng)目的典型流程和代碼實(shí)戰(zhàn)。2.深度理解AI相關(guān)的重要概念,將概念和實(shí)戰(zhàn)項(xiàng)目中的操作對(duì)應(yīng)起來(lái)。3.全面了解ST的端側(cè)AI解決方案體系,尤其是NanoEdgeAIStudio工具的設(shè)計(jì)理論和項(xiàng)目使用。4.掌握典型的AI項(xiàng)目完整研發(fā)落地流程,從數(shù)據(jù)收集到模型訓(xùn)練,最后到項(xiàng)目集成,完成功能并交付。5.深度理解三軸加速度傳感器,并掌握實(shí)戰(zhàn)開(kāi)發(fā)和驅(qū)動(dòng)移植適配。6.系統(tǒng)掌握STM32嵌入式開(kāi)發(fā)完整流程,從硬件設(shè)計(jì)到軟件設(shè)計(jì)、代碼實(shí)戰(zhàn)、調(diào)試技巧等。

項(xiàng)目硬件

項(xiàng)目所需硬件自購(gòu)(提供推薦購(gòu)買鏈接)

主體模塊:

①STM32L432KCU6 MCU

② LIS3DSH 三軸高分辨率 加速度計(jì)傳感器模塊

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 嵌入式
    +關(guān)注

    關(guān)注

    5045

    文章

    18817

    瀏覽量

    298495
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    28876

    瀏覽量

    266218
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    開(kāi)啟全新AI時(shí)代 智能嵌入式系統(tǒng)快速發(fā)展——“第六屆國(guó)產(chǎn)嵌入式操作系統(tǒng)技術(shù)與產(chǎn)業(yè)發(fā)展論壇”圓滿結(jié)束

    嵌入式系統(tǒng)是電子信息產(chǎn)業(yè)的基礎(chǔ),是智能系統(tǒng)的核心。大模型催生AI走入千家萬(wàn)戶、喚醒側(cè)AI的需求爆發(fā)。以機(jī)器人、無(wú)人駕駛和智能制造為代表的智
    發(fā)表于 08-30 17:24

    恩智浦加速嵌入式AI創(chuàng)新應(yīng)用開(kāi)發(fā)

    AI應(yīng)用飛速發(fā)展的今天,如何能夠?qū)?b class='flag-5'>AI與嵌入式系統(tǒng)開(kāi)發(fā)有機(jī)結(jié)合起來(lái),營(yíng)造新的開(kāi)發(fā)生態(tài),打造與眾不同的創(chuàng)新用例,一直是嵌入式開(kāi)發(fā)者追求的目標(biāo)
    的頭像 發(fā)表于 08-27 09:46 ?505次閱讀

    廣和通側(cè)AI解決方案驅(qū)動(dòng)性能密集型場(chǎng)景商用型場(chǎng)景商用

    2024世界機(jī)器人大會(huì)期間,廣和通宣布:基于高通QCS8550平臺(tái)的廣和通側(cè)AI解決方案高效使能性能密集型場(chǎng)景。該側(cè)
    的頭像 發(fā)表于 08-23 16:05 ?505次閱讀
    廣和通<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>解決方案驅(qū)動(dòng)性能密集型場(chǎng)景商用型場(chǎng)景商用

    AI普及給嵌入式設(shè)計(jì)人員帶來(lái)新挑戰(zhàn)

    探討了人工智能(AI)的普及給嵌入式設(shè)計(jì)人員帶來(lái)的新挑戰(zhàn)。在創(chuàng)建“邊緣機(jī)器學(xué)習(xí)(ML)”應(yīng)用時(shí),設(shè)計(jì)人員必須確保其能有效運(yùn)行,同時(shí)最大限度地降低處理器和存儲(chǔ)開(kāi)銷,以及物聯(lián)網(wǎng)(IoT)設(shè)備的功耗
    發(fā)表于 08-22 14:20 ?564次閱讀
    <b class='flag-5'>AI</b>普及給<b class='flag-5'>嵌入式</b>設(shè)計(jì)人員帶來(lái)新挑戰(zhàn)

    嵌入式軟件開(kāi)發(fā)與AI整合

    嵌入式軟件開(kāi)發(fā)與AI整合是當(dāng)前技術(shù)發(fā)展的重要趨勢(shì)之一。隨著人工智能技術(shù)的快速發(fā)展,嵌入式系統(tǒng)越來(lái)越多地集成了AI算法,以實(shí)現(xiàn)更復(fù)雜的智能功能。以下是關(guān)于
    的頭像 發(fā)表于 07-31 09:25 ?486次閱讀
    <b class='flag-5'>嵌入式</b>軟件開(kāi)發(fā)與<b class='flag-5'>AI</b>整合

    EVASH Ultra EEPROM:助力ChatGPT等AI應(yīng)用的嵌入式存儲(chǔ)解決方案

    EVASH Ultra EEPROM:助力ChatGPT等AI應(yīng)用的嵌入式存儲(chǔ)解決方案
    的頭像 發(fā)表于 06-26 18:13 ?710次閱讀

    芯原AI技術(shù)研討會(huì):引領(lǐng)嵌入式AI新潮流

    在2024年上海國(guó)際嵌入式展的熱烈氛圍中,芯原股份以其前瞻性的技術(shù)視角和豐富的產(chǎn)品線布局,吸引了眾多業(yè)界目光。此次展會(huì)期間,芯原股份舉辦了一場(chǎng)以“從云到,AI觸手可及”為主題的AI
    的頭像 發(fā)表于 06-15 14:53 ?594次閱讀

    AI引爆邊緣計(jì)算變革,塑造嵌入式產(chǎn)業(yè)新未來(lái)AI引爆邊緣計(jì)算變革,塑造嵌入式產(chǎn)業(yè)新未來(lái)——2024研華嵌入式

    中國(guó)北京,2024年5月30日?- 2024年研華嵌入式產(chǎn)業(yè)合作伙伴會(huì)議在北京·中關(guān)村皇冠假日酒店成功舉辦,現(xiàn)場(chǎng)參會(huì)嘉賓逾300人。會(huì)議以“AI引爆邊緣計(jì)算變革,塑造嵌入式產(chǎn)業(yè)新未來(lái)”為主題展開(kāi)
    發(fā)表于 05-31 13:53 ?209次閱讀
    <b class='flag-5'>AI</b>引爆邊緣計(jì)算變革,塑造<b class='flag-5'>嵌入式</b>產(chǎn)業(yè)新未來(lái)<b class='flag-5'>AI</b>引爆邊緣計(jì)算變革,塑造<b class='flag-5'>嵌入式</b>產(chǎn)業(yè)新未來(lái)——2024研華<b class='flag-5'>嵌入式</b>

    AI與開(kāi)源力推嵌入式系統(tǒng)創(chuàng)新升級(jí)

    AMD在此次展會(huì)上宣布擴(kuò)大AMD Versal?自適應(yīng)片上系統(tǒng)(SoC)產(chǎn)品線,推出全新第二代Versal AI Edge和Versal Prime系列自適應(yīng)SoC。該系列將預(yù)處理、AI推理和后處理集成于單一器件中,為AI驅(qū)動(dòng)的
    的頭像 發(fā)表于 04-29 11:11 ?373次閱讀

    五項(xiàng)功能可提升邊緣嵌入式AI性能

    AI 驅(qū)動(dòng)型系統(tǒng)正催生指數(shù)級(jí)算力需求,使得在緊湊的空間和功率限制內(nèi)設(shè)計(jì)嵌入式應(yīng)用變得更具挑戰(zhàn)性。
    的頭像 發(fā)表于 04-24 10:06 ?452次閱讀

    AMD Versal SoC刷新邊緣AI性能,單芯片方案驅(qū)動(dòng)嵌入式系統(tǒng)

    與后處理集成于單器件中,能夠?yàn)?AI 驅(qū)動(dòng)型嵌入式系統(tǒng)提供加速。 AI驅(qū)動(dòng)型嵌入式系統(tǒng)的三
    的頭像 發(fā)表于 04-11 09:06 ?3532次閱讀
    AMD Versal SoC刷新邊緣<b class='flag-5'>AI</b>性能,單芯片方案驅(qū)動(dòng)<b class='flag-5'>嵌入式</b>系統(tǒng)

    AMD推出第二代Versal器件,為AI驅(qū)動(dòng)型嵌入式系統(tǒng)提供加速

    Versal AI Edge 系列和第二代 Versal Prime 系列自適應(yīng) SoC,其將預(yù)處理、AI 推理與后處理集成于單器件中,能夠?yàn)?AI 驅(qū)動(dòng)型嵌入式系統(tǒng)提供
    的頭像 發(fā)表于 04-10 10:25 ?991次閱讀

    AMD Versal SoC全新升級(jí)邊緣AI性能,單芯片方案驅(qū)動(dòng)嵌入式系統(tǒng)

    與后處理集成于單器件中,能夠?yàn)?AI 驅(qū)動(dòng)型嵌入式系統(tǒng)提供加速。 ? AI驅(qū)動(dòng)型嵌入式系統(tǒng)
    的頭像 發(fā)表于 04-09 21:32 ?853次閱讀
    AMD Versal SoC全新升級(jí)邊緣<b class='flag-5'>AI</b>性能,單芯片方案驅(qū)動(dòng)<b class='flag-5'>嵌入式</b>系統(tǒng)

    榮耀引領(lǐng)側(cè)AI新時(shí)代

    在今年的MWC盛會(huì)上,榮耀宣布與高通、Meta攜手,將70億參數(shù)大模型引入側(cè),這一創(chuàng)新舉措預(yù)示著側(cè)AI新時(shí)代的到來(lái)。榮耀終端CEO趙明在
    的頭像 發(fā)表于 03-01 10:28 ?465次閱讀

    官方售價(jià)僅249元,嘉楠首發(fā)CanMV-K230嵌入式AI開(kāi)發(fā)板

    為了給嵌入式AI開(kāi)發(fā)者更具性價(jià)比的選擇,嘉楠科技即日起正式發(fā)布CanMV-K230嵌入式AI開(kāi)發(fā)板。該開(kāi)發(fā)板主要針對(duì)智能物聯(lián)
    的頭像 發(fā)表于 10-18 14:49 ?1704次閱讀
    官方售價(jià)僅249元,嘉楠首發(fā)CanMV-K230<b class='flag-5'>嵌入式</b><b class='flag-5'>AI</b>開(kāi)發(fā)板