據(jù)外媒報(bào)道，仿真軟件專家rFpro宣布與索尼半導(dǎo)體解決方案集團(tuán)（Sony Semiconductor Solutions Corporation）合作開(kāi)發(fā)集成到rFpro軟件中的高保真傳感器模型。此次合作將側(cè)重于提高仿真解決方案的保真度，以顯著減少在傳感器開(kāi)發(fā)周期中收集物理數(shù)據(jù)的需求。

此次合作將使ADAS和自動(dòng)駕駛汽車的感知系統(tǒng)能夠在虛擬環(huán)境中開(kāi)發(fā)、訓(xùn)練和測(cè)試，從而助力加速開(kāi)發(fā)。

rFpro運(yùn)營(yíng)總監(jiān)Matt Daley表示：“在我們最近推出的光線追蹤技術(shù)和rFpro的多重曝光攝像頭技術(shù)的開(kāi)發(fā)過(guò)程中，索尼半導(dǎo)體一直是我們重要的合作伙伴。且通過(guò)與索尼密切合作并將其傳感器模型集成到我們的技術(shù)中，我們已經(jīng)能夠在仿真中實(shí)現(xiàn)高水平的相關(guān)性。因此，我們將共同幫助該行業(yè)減少對(duì)收集真實(shí)世界數(shù)據(jù)的依賴，降低成本和耗時(shí)?！?/p>

索尼半導(dǎo)體解決方案公司汽車業(yè)務(wù)部副高級(jí)總經(jīng)理Kenji Onishi表示：“rFpro和索尼半導(dǎo)體解決方案之間的合作將為ADAS感知系統(tǒng)開(kāi)發(fā)人員提供車規(guī)級(jí)End2End仿真管道。根據(jù)攝像頭系統(tǒng)中使用的圖像傳感器的內(nèi)部架構(gòu)，索尼已經(jīng)準(zhǔn)備了一個(gè)傳感器模型，以實(shí)現(xiàn)車規(guī)級(jí)保真度?！?/p>

使用深度神經(jīng)網(wǎng)絡(luò)開(kāi)發(fā)的感知軟件和汽車圖像傳感器都是該管道的組成部分，并且變得更加復(fù)雜以滿足對(duì)更高ADAS功能和穩(wěn)健性的需求，但這也給開(kāi)發(fā)和驗(yàn)證帶來(lái)了巨大壓力。車規(guī)級(jí)仿真是一種生成合成數(shù)據(jù)的工具，可作為上述問(wèn)題的解決方案。

信號(hào)處理、LED閃爍緩解、光譜效應(yīng)和圖像傳感器控制（例如運(yùn)動(dòng)模糊和滾動(dòng)快門）是索尼傳感器模型實(shí)現(xiàn)的復(fù)制現(xiàn)象的一些示例。索尼在傳感器模型和渲染系統(tǒng)之間的接口非常高效，可以快速運(yùn)行高保真仿真。該接口在索尼的所有汽車圖像傳感器中也是通用的，使用戶能夠在新一代傳感器模型上市時(shí)快速過(guò)渡。

仿真使車輛系統(tǒng)能夠經(jīng)受各種場(chǎng)景。天氣、時(shí)間、交通量和行人都可以獨(dú)立自動(dòng)地控制和變化。rFpro已將場(chǎng)景中的所有內(nèi)容都使用準(zhǔn)確的材料特性進(jìn)行物理建模，并且重新創(chuàng)建的路面高度精度在1毫米以內(nèi)。

Daley補(bǔ)充說(shuō)：“在仿真中，車輛每天可以行駛數(shù)千英里的高價(jià)值、高活動(dòng)虛擬里程，且可以識(shí)別邊緣情況并快速生成新的迭代以徹底運(yùn)行傳感器系統(tǒng)。仿真使得測(cè)試無(wú)需現(xiàn)實(shí)世界中等待曝光的需要。在現(xiàn)實(shí)世界中，大部分行駛里程都相對(duì)平靜?！?/p>

索尼是第一家與rFpro合作開(kāi)發(fā)其光線追蹤技術(shù)的合作伙伴。該技術(shù)使用多條光線準(zhǔn)確捕捉現(xiàn)實(shí)世界的所有細(xì)微差別。作為一種多路徑技術(shù)，它可以可靠地仿真攝像頭周圍發(fā)生的大量反射。這對(duì)于低光場(chǎng)景或有多個(gè)光源以準(zhǔn)確描繪反射和陰影的環(huán)境至關(guān)重要。

rFpro的光線追蹤應(yīng)用于仿真場(chǎng)景中的每個(gè)元素，這些元素已經(jīng)過(guò)物理建模以包含準(zhǔn)確的材料屬性，以創(chuàng)建最高保真度的圖像。由于這對(duì)計(jì)算要求很高，因此該技術(shù)可以實(shí)時(shí)解耦，且可以調(diào)整幀渲染速率以適應(yīng)所需的細(xì)節(jié)級(jí)別。

汽車行業(yè)使用的現(xiàn)代HDR（高動(dòng)態(tài)范圍）攝像頭捕捉不同時(shí)間長(zhǎng)度的多次曝光。例如每幀短、中、長(zhǎng)曝光。為了準(zhǔn)確地仿真這一點(diǎn)，rFpro引入了多重曝光攝像頭API，并與傳感器制造商的傳感器模型集成在一起，從而使傳感器模型能夠以與物理對(duì)應(yīng)物完全相同的曝光時(shí)間對(duì)虛擬世界進(jìn)行采樣。

Daley總結(jié)道：“通過(guò)rFpro渲染和索尼的傳感器模型管道，運(yùn)動(dòng)模糊、卷簾快門特性、濾色器特性和物理傳感器的信號(hào)處理都存在于仿真圖像中。新模型還允許在傳感器模型上復(fù)制圖像傳感器中的LED閃爍緩解功能，并在仿真中充分發(fā)揮作用。此外，該傳感器模型能夠與在rFpro的高保真資產(chǎn)和渲染系統(tǒng)上仿真的快速閃爍的LED光源進(jìn)行交互，例如交通燈和車輛剎車燈。準(zhǔn)確地復(fù)制這些現(xiàn)象對(duì)于實(shí)現(xiàn)與現(xiàn)實(shí)世界的高度關(guān)聯(lián)至關(guān)重要?！?/p>

審核編輯黃宇