計(jì)算機(jī)視覺(jué)教學(xué)的內(nèi)容有哪些?

EAIDK-610是專為AI開(kāi)發(fā)者和學(xué)生精心打造，面向邊緣計(jì)算的人工智能開(kāi)發(fā)套件。學(xué)生或者開(kāi)發(fā)者可以使用此套件了解人工智能的相關(guān)知識(shí)，了解計(jì)算機(jī)視覺(jué)、人臉檢測(cè)、人臉識(shí)別、雙目立體視覺(jué)等相關(guān)算法，并且可以使用此套件做一些擴(kuò)展，做產(chǎn)品原型的驗(yàn)證。

EAIDK-610硬件平臺(tái)（EAI610-P0）使用高性能Arm SoC（瑞芯微rk3399），搭載OPEN AI LAB嵌入式AI開(kāi)發(fā)平臺(tái)AID（包含支持異構(gòu)計(jì)算庫(kù)HCL、嵌入式深度學(xué)習(xí)框架Tengine、以及輕量級(jí)嵌入式計(jì)算機(jī)視覺(jué)加速庫(kù)BladeCV）。為AI應(yīng)用提供簡(jiǎn)潔、高效、統(tǒng)一的API接口，加速終端AI產(chǎn)品的場(chǎng)景化應(yīng)用落地實(shí)現(xiàn)。

計(jì)算機(jī)視覺(jué)教學(xué)主要內(nèi)容如下：

01圖像采集

圖像采集主要介紹如何對(duì)EAI610-P0的視頻圖像進(jìn)行采集，以及介紹V4L2，RockchipISP和RockchipRGA 的概念及簡(jiǎn)單操作應(yīng)用。

02

圖像處理

圖像處理是指對(duì)圖像進(jìn)行分析、加工、和處理，使其滿足視覺(jué)、心理或其他要求的技術(shù)。圖像處理是信號(hào)處理在圖像領(lǐng)域上的一個(gè)應(yīng)用。圖像處理通過(guò)對(duì)MIPI攝像頭采集到的圖像應(yīng)用多種處理方法，介紹了數(shù)字圖像處理領(lǐng)域的常用概念和基本方法。

03

視頻編碼

視頻編碼教學(xué)案例的目的是介紹視頻壓縮的原理，并以EAIDK610為例展示一個(gè)實(shí)際的視頻硬編碼實(shí)例。主要介紹的視頻壓縮的概念和歷史，同時(shí)著重分析了H.264標(biāo)準(zhǔn)，在此基礎(chǔ)上采用EAIDK610上的硬件編碼作為實(shí)例，希望達(dá)到理論和實(shí)踐相結(jié)合的教學(xué)目標(biāo)。

04

視頻解碼

視頻解碼介紹視頻壓縮的原理，并以EAIDK610為例展示一個(gè)實(shí)際的視頻硬解碼實(shí)例。教學(xué)方案介紹的視頻壓縮的概念和歷史，同時(shí)著重分析了H.264標(biāo)準(zhǔn)，在此基礎(chǔ)上采用EAIDK610上的硬件解碼作為實(shí)例，希望達(dá)到理論和實(shí)踐相結(jié)合的教學(xué)目標(biāo)。

05

視頻分析之背景提取

背景提取主要介紹在EAI610-P0的實(shí)時(shí)采集視頻圖像基礎(chǔ)上的背景提取，著重介紹和實(shí)現(xiàn)基于混合高斯模型和CodeBook的背景提取算法，最后對(duì)結(jié)果簡(jiǎn)單分析，并對(duì)其他算法進(jìn)行簡(jiǎn)要介紹。

06

人臉檢測(cè)（傳統(tǒng)機(jī)器學(xué)習(xí)方法）

人臉檢測(cè)是為了學(xué)習(xí)人臉檢測(cè)的概念，了解傳統(tǒng)機(jī)器學(xué)習(xí)人臉檢測(cè)方法，展示傳統(tǒng)機(jī)器學(xué)習(xí)算法及應(yīng)用開(kāi)發(fā)過(guò)程。本教學(xué)方案以haar+adaboost算法為例，從算法的原理分析開(kāi)始，不僅介紹了算法訓(xùn)練的過(guò)程，也展示了算法在嵌入式平臺(tái)（EAI610-P0）的部署。

07

人臉特征提?。ㄉ疃葘W(xué)習(xí)方法）

人臉特征提取是以人臉特征提取方案為例，展示完整的深度學(xué)習(xí)算法及應(yīng)用開(kāi)發(fā)過(guò)程，同時(shí)介紹人臉識(shí)別中的核心算法概念。此教學(xué)方案以Light CNN 為例，從算法的原理分析開(kāi)始，不僅介紹了算法訓(xùn)練的過(guò)程，也展示了算法在嵌入式平臺(tái)（EAI610-P0）的部署。

08

雙目立體視覺(jué)

雙目立體視覺(jué)是學(xué)習(xí)立體視覺(jué)的概念，掌握用雙目相機(jī)計(jì)算深度信息的方法。從雙目相機(jī)標(biāo)定及矯正原理分析開(kāi)始，介紹雙目立體視覺(jué)的基礎(chǔ)理論方法，并且介紹了基于SGBM的深度計(jì)算算法，最終在嵌入式平臺(tái)（EAI610-P0）上使用兩個(gè)高清相機(jī)模組部署。

09

人臉識(shí)別系統(tǒng)

人臉識(shí)別是以人臉特征提取方案為例，展示完整的深度學(xué)習(xí)算法及應(yīng)用開(kāi)發(fā)過(guò)程，以Light CNN 1 為例 ，從算法的原理及特點(diǎn)開(kāi)始，不僅介紹了算法訓(xùn)練的過(guò)程，也展示了算法在嵌入式平臺(tái)（EAI610-P0）的部署 。

010

雙路人臉門(mén)禁系統(tǒng)

雙路人臉門(mén)禁系統(tǒng)是以嵌入式人工智能開(kāi)發(fā)套件（EAIDK-610）為基礎(chǔ)平臺(tái)，人員進(jìn)門(mén)時(shí)，網(wǎng)絡(luò)攝像機(jī)（IPC）連續(xù)抓取多張人臉信息，并毫秒級(jí)地比對(duì)抓取照片和底庫(kù)信息，比對(duì)成功后觸發(fā)開(kāi)門(mén)動(dòng)作，人臉抓取、比對(duì)結(jié)果和人員進(jìn)門(mén)的信息在顯示設(shè)備上實(shí)時(shí)展示。

011

目標(biāo)檢測(cè)（深度學(xué)習(xí)方法）

目標(biāo)檢測(cè)方案是在嵌入式平臺(tái)上進(jìn)行機(jī)器視覺(jué)的目標(biāo)檢測(cè)，通過(guò)深度學(xué)習(xí)的方法實(shí)現(xiàn)對(duì)多目標(biāo)物體進(jìn)行檢測(cè)并識(shí)別。使用Arm的嵌入式人工智能開(kāi)發(fā)套件（EAIDK-610）為基礎(chǔ)平臺(tái)，通過(guò)網(wǎng)絡(luò)攝像機(jī)進(jìn)行視頻數(shù)據(jù)采集，EAIDK-610作為邊緣智能處理對(duì)視頻進(jìn)行分析，并實(shí)時(shí)顯示分析結(jié)果。