工業(yè)界“黃金標(biāo)準(zhǔn)”之稱的全球人臉識別算法測試結(jié)果

美國國家標(biāo)準(zhǔn)與技術(shù)研究院（NIST）剛剛公布了有工業(yè)界“黃金標(biāo)準(zhǔn)”之稱的全球人臉識別算法測試（FRVT）結(jié)果，依圖科技以千萬分之一誤報下的識別準(zhǔn)確率超過99%，繼續(xù)保持全球人臉識別競賽冠軍，中國公司商湯科技摘得第三名和第四名。

根據(jù)最新公布的全球權(quán)威人臉識別供應(yīng)商測試 FRVT 結(jié)果，曠視、商湯和依圖這三家視覺獨(dú)角獸首次在公開場合同臺競技，最終由依圖拿下第一。

FRVT 是美國國家標(biāo)準(zhǔn)技術(shù)局（NIST）定期舉辦的人臉識別供應(yīng)商測試（Face Recognition Vendor Test），旨在衡量人臉識別算法的最先進(jìn)水平。由于訓(xùn)練集不公開，數(shù)據(jù)集不能憑借過擬合測試集達(dá)到更好的成績，再加上結(jié)果受商業(yè)因素影響較小，F(xiàn)RVT 素來被視為工業(yè)界“黃金標(biāo)準(zhǔn)”。

根據(jù)報告，排在第一名的是依圖科技今年10月提交的算法，也是參賽團(tuán)隊中在千萬分之一誤報指標(biāo)下，唯一將漏報率降到1%以下的團(tuán)隊。在相同漏報率的情況下，商湯科技（Sense time-001）的誤報率是依圖（yitu-002）的30-50倍，在誤報率指標(biāo)相同的情況下，依圖的漏報率是商湯的30%-45%。

在這份官方公布的報告中，中國人工智能公司實力展現(xiàn)，依圖科技（yitu）、商湯科技（sensetime）、曠視科技（megvii）囊括了前十中的五席，加上排名第五的中國科學(xué)院深圳先進(jìn)技術(shù)研究院（siat），中國團(tuán)隊已經(jīng)超過半數(shù)，并穩(wěn)穩(wěn)“霸屏”前五，領(lǐng)跑全球人臉識別算法。

曠視商湯依圖首次同臺公開競技，依圖拿下第一

美國國家標(biāo)準(zhǔn)與技術(shù)研究院（National Institute of Standards and Technology，NIST）直屬美國商務(wù)部，主要任務(wù)是建立國家計量基準(zhǔn)與標(biāo)準(zhǔn)，提供為美國工業(yè)和國防服務(wù)的測試技術(shù)，參加標(biāo)準(zhǔn)化技術(shù)委員會制定標(biāo)準(zhǔn)等。NIST指導(dǎo)下的人臉識別算法測試，數(shù)據(jù)均來自真實業(yè)務(wù)場景，意味著測試結(jié)果代表該技術(shù)在實戰(zhàn)場景中的表現(xiàn)。

FRVT通過上百億次樣本比對，對算法精度的評估可以到達(dá)百萬分之一，也是當(dāng)今全球規(guī)模最大、標(biāo)準(zhǔn)最嚴(yán)、競爭最激烈、最權(quán)威的人臉識別算法比賽。由于競賽評測標(biāo)準(zhǔn)的嚴(yán)謹(jǐn)性、一致性和全面性，F(xiàn)RVT十多年來一直被業(yè)界作為人臉識別算法性能的“黃金標(biāo)準(zhǔn)”。

FRVT人臉識別測試集數(shù)據(jù)量很大，包含簽證照片（visa）、逮捕照片（mugshot）、網(wǎng)絡(luò)攝像頭照片（webcam）、人臉自拍（selfie）和無約束環(huán)境下人臉圖像（wild）等幾大種類，F(xiàn)RVT會在每次結(jié)果報告中給出特定閾值下單項測試集的排名。

FRVT人臉識別測試集有多種測試集組成，數(shù)據(jù)量大且均來自實際場景，代表了算法在實戰(zhàn)場景中的表現(xiàn)。制圖：新智元

截至目前，全球頂級大廠都參加過這項競賽，包括老牌大廠荷蘭公司Gemalto，法國公司Morpho，日本公司Panasonic，俄羅斯公司Vocord，以及中國的?？低?/u>、平安科技等。