0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

墨魚眼睛啟發(fā)的人工視覺,可在不均勻的照明條件下實(shí)現(xiàn)高質(zhì)量成像

MEMS ? 來源:MEMS ? 2023-02-22 11:02 ? 次閱讀

人工視覺可以在移動機(jī)器人中發(fā)揮關(guān)鍵作用,包括自動駕駛汽車,以監(jiān)控周圍環(huán)境并檢測接近的物體以避免碰撞,這可以部分或完全替代在不斷變化的光線條件下易受傷害的人類視覺。對于此類應(yīng)用,物體的高可檢測性很重要,這通常需要高對比度和高敏銳度的成像系統(tǒng)?;谙鄼C(jī)的視覺系統(tǒng)因其低成本、小尺寸和單次圖像捕獲能力,支持圖像檢測。然而,有限的圖像對比度,特別是在垂直不均勻的照明條件下,由于上視野中的強(qiáng)烈陽光散射和從周圍玻璃表面反射的隨機(jī)偏振太陽光噪聲,嚴(yán)重阻礙了高質(zhì)量成像,從而導(dǎo)致物體可檢測性低。而汽車駕駛員可以通過遮陽板和太陽鏡物理阻擋強(qiáng)烈的上部陽光并減輕偏振噪音。這有用于移動機(jī)器人和自動駕駛汽車的人工視覺系統(tǒng)利用基于軟件的方法來解決這種不利的光照條件。然而,系統(tǒng)應(yīng)處理的大量視覺信息需要很高的計(jì)算能力和能耗。因此,需要適當(dāng)?shù)?a href="http://www.ttokpm.com/v/tag/1751/" target="_blank">硬件解決方案來處理非均勻的光條件,最大限度地減少偏振光噪聲,并減少數(shù)據(jù)處理量。

同時,自然界中的視覺系統(tǒng)激發(fā)了具有獨(dú)特功能的人工視覺系統(tǒng)的發(fā)展。例如,水生和兩棲動物已經(jīng)進(jìn)化到具有針對其棲息地優(yōu)化的眼睛,這些都激發(fā)了各種人工視覺系統(tǒng)。受魚眼全景成像能力的啟發(fā),開發(fā)了由單中心透鏡和半球形硅納米棒光電二極管陣列組成的小型化寬視場(FOV)成像系統(tǒng)。受象鼻魚(Gnathonemus petersii)的視網(wǎng)膜結(jié)構(gòu)的啟發(fā),它可以增強(qiáng)在低光條件下收集的光強(qiáng)度,已經(jīng)開發(fā)出一種由微量光收集器組成的光敏增強(qiáng)劑。受螳螂蝦(如齒趾蝦)的高光譜和極化成像策略的啟發(fā),已經(jīng)開發(fā)出一種由偏振敏感有機(jī)光電探測器和折疊聚合物緩凝劑組成的圖像傳感器。受生活在潮間帶地區(qū)的提琴蟹(Uca arcuata)的扁平角膜微透鏡和柄眼結(jié)構(gòu)的啟發(fā),已經(jīng)開發(fā)出一種具有360°FOV的全天候成像系統(tǒng),該系統(tǒng)由多層扁平微透鏡和球形硅光電二極管陣列組成。盡管為開發(fā)各種生物啟發(fā)的人工視覺系統(tǒng)做出了這樣的努力,但尚未開發(fā)出一種可以平衡垂直不均勻照明,同時在由于隨機(jī)偏振陽光的高噪聲條件下實(shí)現(xiàn)高對比度和敏銳度的系統(tǒng)。

0c6eceec-b246-11ed-bfe3-dac502259ad0.png

在這種情況下,墨魚(棕褐色屬)已經(jīng)進(jìn)化為具有針對垂直不均勻照明和偏振光檢測優(yōu)化的高敏銳度視覺系統(tǒng)(分別為圖1,A和B),激發(fā)了移動機(jī)器人的高性能人工視覺。墨魚具有獨(dú)特的眼睛結(jié)構(gòu),由W形瞳孔(圖2A i),單個球形晶狀體(圖2A ii)和彎曲的視網(wǎng)膜(圖2A iii)組成,具有高密度帶狀感光器區(qū)域(圖2B)和偏振敏感光感受器(圖2B,右插圖)。在白天,獨(dú)特的W形瞳孔通過平衡垂直不均勻的照明使墨魚具有高對比度的視力(圖1A,紅色虛線區(qū)域)。視網(wǎng)膜中的高密度帶狀感光器區(qū)域允許其感興趣區(qū)域(ROI)具有高視力(圖1A,ii與i)。這種帶狀感光器分布是檢測地平線附近接近物體的最佳選擇。此外,光感受器的水平或垂直堆疊的微絨毛允許墨魚通過提取從目標(biāo)物體反射的偏振光并過濾掉隨機(jī)偏振的背景噪聲來有效地識別偽裝的獵物(圖1B,ii與i),從而增強(qiáng)視覺對比度。

0cbd6ad4-b246-11ed-bfe3-dac502259ad0.png

受墨魚視覺系統(tǒng)這種獨(dú)特的結(jié)構(gòu)和功能特征的啟發(fā),研究人員提出了一種人工視覺系統(tǒng),該系統(tǒng)可在垂直不均勻的照明條件下實(shí)現(xiàn)高對比度和高敏銳度成像,以實(shí)現(xiàn)高性能人工視覺,從而有望在移動機(jī)器人中應(yīng)用。人工視覺系統(tǒng)中的W形瞳孔通過減少垂直FOV頂部的入射光來補(bǔ)償不均勻的垂直光分布。此外,圓柱形硅光電二極管陣列(c-Si-PDA)包括高密度帶狀像素區(qū)域,可在ROI中實(shí)現(xiàn)高敏銳度成像。集成在c-Si-PDA表面的柔性碳納米管(CNT)-偏振膜(FCPF)在可見光波長范圍內(nèi)保持~78%的平均偏振度,從而實(shí)現(xiàn)偏振敏感成像。通過集成這些光學(xué)電子元件,開發(fā)了一種人工視覺系統(tǒng),該系統(tǒng)可以平衡不均勻的光分布,同時實(shí)現(xiàn)高對比度和敏銳度。

0cfe1e94-b246-11ed-bfe3-dac502259ad0.png

論文信息:
https://www.science.org/doi/10.1126/scirobotics.ade4698

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 成像系統(tǒng)
    +關(guān)注

    關(guān)注

    2

    文章

    190

    瀏覽量

    13878
  • 光電探測器
    +關(guān)注

    關(guān)注

    4

    文章

    259

    瀏覽量

    20305
  • 人工視覺
    +關(guān)注

    關(guān)注

    0

    文章

    10

    瀏覽量

    2534

原文標(biāo)題:墨魚眼睛啟發(fā)的人工視覺,可在不均勻的照明條件下實(shí)現(xiàn)高質(zhì)量成像

文章出處:【微信號:MEMSensor,微信公眾號:MEMS】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    LITESTAR 4D應(yīng)用:溫室植物照明案例

    設(shè)計(jì)意義 現(xiàn)如今,越來越多的人工光源改變照明模式,使得植物照明的發(fā)展趨勢越來越迅速。這種設(shè)計(jì)的意義是:提升光能利用率,照明促進(jìn)植物高效高質(zhì)量成
    發(fā)表于 08-13 17:57

    不均勻性的定義 PPT學(xué)習(xí)資料

    不均勻性的定義可以這樣說:組成系統(tǒng)是由傳輸線+功能電路,這中間會遇到大量的不均勻性或者說不連續(xù)性。對于不均性的研究有兩個方面,不均勻性分析方法和不均
    發(fā)表于 11-02 17:13

    OMNIVISION DSC等級的高質(zhì)量成像產(chǎn)品

    lux),同時堆疊高度也是世界最小,非常適合用于時下流行的超薄手機(jī)。另外,此設(shè)備具備自動影像控制功能以及視頻編碼的高幀率,即使在最嚴(yán)苛的光線條件下,也能帶來生動鮮活的靜態(tài)和視頻影像?! ?.75
    發(fā)表于 10-30 17:04

    矩陣式LED的顯示亮度不均勻

    亮的效果(比如點(diǎn)亮LED2 LED 4 LED6 LED8 LED11 LED12)刷新6次;然后,發(fā)現(xiàn)亮度不夠,并且顯示起來亮度不均勻,然后又嘗試了行列式點(diǎn)亮,也是亮度不均勻,其實(shí)單獨(dú)做個LED顯示
    發(fā)表于 12-17 08:41

    VHDL小源程序平均頻率輸出不均勻

    一.積分分頻(小數(shù)分頻)注:只是對平均頻率,輸出不均勻。library ieee; use ieee.std_logic_1164.all; use
    發(fā)表于 02-20 06:35

    基于不均勻密度的自動聚類算法

    針對基于密度的聚類算法不能自動處理密度分布不均勻的數(shù)據(jù)問題,提出一種基于不均勻密度的自動聚類算法。該算法既保持了一般基于密度算法的優(yōu)點(diǎn),也能有效地處理分布不均
    發(fā)表于 04-09 09:39 ?16次下載

    應(yīng)用于工業(yè)檢測的光照不均勻圖像的校正

    文中提出利用低通濾波的方法實(shí)現(xiàn)對光照不均勻圖像的校正。該方法的理論依據(jù)是在對照明光場的頻譜特性進(jìn)行分析的基礎(chǔ)上提出的;接著將濾波器的設(shè)計(jì)作為重點(diǎn),針對參數(shù)選
    發(fā)表于 01-15 11:47 ?15次下載

    照度不均勻圖像的自動Gamma灰度校正

    照度不均勻圖片分辨率較差,許多信息被掩蓋,為了較好地去除光照影響,真實(shí)再現(xiàn)原場景,本文提出了一種改進(jìn)的Gamma非線性灰度矯正函數(shù),實(shí)現(xiàn)了對不同像素進(jìn)行不同程度的灰度修正,另
    發(fā)表于 03-01 14:31 ?26次下載

    OMNIVISION推出DSC等級的高質(zhì)量成像產(chǎn)品

    OMNIVISION推出DSC等級的高質(zhì)量成像產(chǎn)品 高級數(shù)字成像解決方案的領(lǐng)先開發(fā)商OmniVision Technologies, Inc.于近日宣布推出針對手機(jī)、基于1.75μ OmniBSI(背面照度)架構(gòu)的最新成
    發(fā)表于 06-29 07:44 ?746次閱讀

    為什么數(shù)碼管亮度不均勻?

    為什么數(shù)碼管亮度不均勻?  關(guān)于亮度一致性的問題是一個行業(yè)內(nèi)的常見問題?! ∮卸€大的因素影響到亮度一致性?! ∫皇鞘褂迷牧闲酒倪x
    發(fā)表于 11-06 11:44 ?6097次閱讀

    RTC 計(jì)秒不均勻

    STM32F103RCT6的RTC 計(jì)秒不均勻
    發(fā)表于 12-07 18:13 ?0次下載

    簡單分析光纖激光打標(biāo)機(jī)打標(biāo)效果不均勻的原因

    光纖激光打標(biāo)機(jī)打標(biāo)效果不均勻的原因分析。
    的頭像 發(fā)表于 12-25 13:15 ?708次閱讀

    機(jī)器人靜電噴涂不均勻的原因有哪些

    因種種原因機(jī)器人靜電噴涂有時候也有噴涂不均勻的情況,下面分享一機(jī)器人靜電噴涂不均勻的原因。
    發(fā)表于 12-26 08:27 ?759次閱讀

    淺談連接器電鍍不均勻的原因

    很多連接器都需要電鍍,但是有些連接器電鍍后會出現(xiàn)電鍍不均勻的情況。我們來看看原因。
    的頭像 發(fā)表于 12-07 14:18 ?1327次閱讀

    DataParallel里為什么會顯存不均勻以及如何解決

    DataParallel里為什么會顯存不均勻以及如何解決
    的頭像 發(fā)表于 12-14 10:36 ?1016次閱讀