0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

人工智能的缺陷或?qū)е聶C器產(chǎn)生幻覺

jmiy_worldofai ? 來源:cc ? 2019-01-24 11:18 ? 次閱讀

乘客看到了停車標志,突然感到一陣恐慌,因為他坐的汽車反而開始加速。當他看到前面的鐵軌上一列火車向他們疾馳而來時,他張開嘴對前面的司機大聲喊叫,但他突然意識到汽車前坐并沒有司機。列車以每小時125英里的速度撞上來,壓碎了這輛自動駕駛汽車,乘客當場死亡。

這個場景是虛構(gòu)的,但是凸顯了當前人工智能框架中一個非常真實的缺陷。在過去的幾年里,已經(jīng)有越來越多的例子表明,機器可以被誤導,看見或聽見根本不存在的東西。如果出現(xiàn)“噪音”會干擾到人工智能的識別系統(tǒng),就可能產(chǎn)生誤覺。在最壞的情況下,他們可能會因“幻覺”導致上面一樣危險的場景,盡管停車標志在人眼中清晰可見,但機器卻未能識別出來。

人工智能時代下人類所剩的最后價值

人工智能的真正風險

人工智能面臨的最大挑戰(zhàn)不是技術(shù)?

Image caption“停止”標志上一些簡單的貼紙就足以使機器視覺算法看不見這個告示,而在人類的眼中依然顯而易見。

人工智能領(lǐng)域工作者將這些小故障描述為“對抗性的例子”,或者有時更簡單地說是“怪異事件”。

美國麻省理工學院(Massachusetts Institute of Technology)的計算機科學家阿塔利(Anish Athalye)表示:“我們可以把這些東西看作是人工智能網(wǎng)絡(luò)會以某種方式處理的輸入信息,但機器在看到這些輸入信息后會做出一些意想不到的反應(yīng)。”

看物體

到目前為止,人們主要關(guān)注的是視覺識別系統(tǒng)。阿塔利自己已經(jīng)證明,將一張貓的圖像稍加改動,人眼看來仍是一只標準的貓,卻被所謂的神經(jīng)網(wǎng)絡(luò)誤解為是鱷梨醬。神經(jīng)網(wǎng)絡(luò)是一種機器學習算法,極大地推動了現(xiàn)代人工智能技術(shù)的發(fā)展。這類神經(jīng)網(wǎng)絡(luò)視覺識別系統(tǒng)已經(jīng)被用來增強你的智能手機的能力,讓手機在不被告知是誰的情況下對你的朋友照片進行身份標記,或者識別你手機照片中的其他物體。

最近,阿塔利和他的同事們把注意力轉(zhuǎn)向了實際物體。發(fā)現(xiàn)只要稍微調(diào)整一下它們的紋理和顏色,他的團隊就可以騙過人工智能,把這些物體認作別的東西。在一個案例中,棒球被誤認為是一杯濃縮咖啡,而在另一個案例中,3D打印的海龜被誤認為是步槍。還有其他例子,他們制造了約200個3D打印物體,這些物體以類似的方式欺騙了電腦。今天當我們開始在家里使用機器人、在空中運用自動駕駛無人機、在街道上行駛自動駕駛汽車時,機器人的這種誤覺開始拋出一些令人擔憂的可能性。

阿塔利說, “起初,這只是一種好奇,然而,隨著這些智能系統(tǒng)越來越多地部署在現(xiàn)實世界中,人們正將其視為一個潛在的安全問題?!?/p>

以目前正在進行實地試驗的無人駕駛汽車為例:這些汽車通常依靠復雜的深度學習神經(jīng)網(wǎng)絡(luò)導航,并告訴它們該做什么。

但在去年,研究人員證明,僅僅只在路標上粘一兩張小貼紙,神經(jīng)網(wǎng)絡(luò)就可能受騙,將道路上的“停車”標志誤認為限速標志。

Image caption盡管對于機器學習算法,讓海龜看起來像步槍似乎是無害的,但研究人員擔心,隨著人工智能在現(xiàn)實世界中的應(yīng)用,可能會帶來一些危險后果。

聽聲音

神經(jīng)網(wǎng)絡(luò)并不是唯一使用的機器學習框架,但其他的人工智能框架似乎也容易遭受這些怪異事件的影響。并且不限于視覺識別系統(tǒng)。

谷歌大腦(Google Brain)正在研發(fā)智能機器。谷歌大腦的研究科學家卡里尼(Nicholas Carlini)說,“在我見過的每一個領(lǐng)域,從圖像分類到自動語音識別,再到翻譯,神經(jīng)網(wǎng)絡(luò)都可能受到攻擊,導致輸入信號被錯誤分類?!笨ɡ锬嶙髁苏故?,加上一些摩擦的背景噪音后,“沒有數(shù)據(jù)集的文章是無用的”這句話的讀音,機器會誤譯為“好,谷歌要瀏覽evil.com”。而且它不僅限于語音講話。在另一個例子中,巴赫(Bach)的第一號無伴奏大提琴組曲(Cello Suit 1)中的一段音樂節(jié)選被記錄為“語言可以嵌入音樂”。

在卡里尼看來,這些對抗性的例子“最終證明,哪怕在非常簡單的任務(wù)上,機器學習也沒有達到人類的能力”。

內(nèi)在原理

人工神經(jīng)網(wǎng)絡(luò)是大致模仿大腦(即生物神經(jīng)網(wǎng)絡(luò))處理視覺信息的功能并從中學習方法。想象一個小孩正在學習認識貓是什么東西:當他們見到這種動物的次數(shù)越來越多時,就會開始注意到這種動物的一些固定模式,發(fā)現(xiàn)這團叫做貓的東西有四條腿,有柔軟的皮毛、兩只尖耳朵、杏仁狀的眼睛和一條毛茸茸的長尾巴。在兒童的視覺皮層(大腦中處理視覺信息的區(qū)域)內(nèi),多層神經(jīng)元會對視覺細節(jié)做出反應(yīng),如水平和垂直的線條,使兒童能夠構(gòu)建一幅世界的神經(jīng)“圖畫”,并從中學習視覺識別。

神經(jīng)網(wǎng)絡(luò)的工作原理與此類似,獲取的數(shù)據(jù)通過多層人工神經(jīng)元網(wǎng)絡(luò)傳輸進行信息處理,在接受到成百上千個相同物體的樣本(通常由人類標記)的訓練之后,神經(jīng)網(wǎng)絡(luò)開始建立此物體的視覺識別模式,從而能夠在其后認得出正在觀看的東西是這種物體。其中最復雜的系統(tǒng)采用“深度學習”,這意味著需要擁有更多的信息處理層。

人工智能公司為什么要不停的砸玻璃?

人工智能受愚弄后也會犯"低級錯誤"

機器人能否終結(jié)令人抓狂的客服電話?

Image caption稍微改變物體的紋理,研究人員能夠讓一個3D打印的棒球看起來像一杯濃縮咖啡。

然而,盡管計算機科學家了解人工神經(jīng)網(wǎng)絡(luò)如何工作,但他們并不一定知道在處理大數(shù)據(jù)時的具體細節(jié)。阿塔利說, “我們目前對神經(jīng)網(wǎng)絡(luò)的理解還不夠,比如說,無法準確解釋為什么會存在對抗性例子,也不知道如何解決這個問題?!?/p>

部分問題可能與現(xiàn)有技術(shù)被設(shè)計用來解決的任務(wù)的性質(zhì)有關(guān),例如區(qū)分貓和狗的圖像。為了做到這一點,神經(jīng)網(wǎng)絡(luò)技術(shù)將處理大量貓和狗的模樣信息,直到有足夠的數(shù)據(jù)點來區(qū)分兩者。

研究機器學習框架可靠性和安全性的麻省理工學院計算機科學家麥德里(Aleksander Madry)說,“我們機器學習框架的主要目標是'就平均值而言'有良好的表現(xiàn)。當機器識別大多數(shù)狗的圖像表現(xiàn)很好時,你感到鼓舞,但總會有一些狗的圖像讓機器困惑,無法識別?!?/p>

或許一種解決方案是用更有挑戰(zhàn)性的圖像來訓練神經(jīng)網(wǎng)絡(luò)。這可以使人工神經(jīng)網(wǎng)絡(luò)免受異常值的影響。

麥德里說, “這無疑是朝著正確方向邁出的一步?!彪m然這種方法看起來確實使框架更加強大,但也可能有一些限制,因為有許多方法可以改變圖像或物體的外觀從而產(chǎn)生混淆。

一個真正強大的圖像分類器會復制"相似性"對人類的作用,因而可以認出一個孩子涂鴉的貓和一張貓的照片以及一只現(xiàn)實生活中移動的貓代表的是同一樣東西。盡管深度學習神經(jīng)網(wǎng)絡(luò)令人印象深刻,但在對物體進行分類、感知周遭環(huán)境或處理突發(fā)事件方面,仍無法與人腦匹敵。

如果我們想要開發(fā)出能夠在現(xiàn)實世界中發(fā)揮作用的真正智能機器,或許我們應(yīng)該回到人腦上來,更好地理解人腦是如何解決這些問題的。

捆綁問題

雖然神經(jīng)網(wǎng)絡(luò)是受到人類視覺皮層的啟發(fā),但越來越多的人認識到這種相似性只是表面現(xiàn)象。一個關(guān)鍵的區(qū)別在于,除了識別物體邊緣的線條或物體本身等視覺特征外,我們的大腦還對這些特征之間的關(guān)系進行編碼,因此,物體的邊緣就構(gòu)成了這個物體的一部分。這使我們能夠?qū)ξ覀兯吹降哪J劫x予意義。

“當你或我看著一只貓時,我們看到了構(gòu)成貓的所有特征,以及它們之間的相互關(guān)系,” 牛津大學理論神經(jīng)科學和人工智能基金會(Oxford Foundation for theory Neuroscience and Artificial Intelligence)的斯特林格(Simon Stringer)如此說?!斑@種相互'捆綁的'信息是我們理解世界的能力和我們的一般智力的基礎(chǔ)。”

這個起關(guān)鍵作用的捆綁信息在當代的人工神經(jīng)網(wǎng)絡(luò)中是缺失的。

斯特林格解釋說, “如果你還沒有解決捆綁問題,你可能會意識到場景中的某個地方有一只貓,但你不知道它在哪里,也不知道場景中的哪些特征是這只貓的一部分。”

Image caption對我們的耳朵來說,一段古典音樂聽起來就是樂器的交響樂,但這段音樂若稍作修改,人工智能可能會理解為是一個語音指令。

為了簡單易行,構(gòu)建當代人工神經(jīng)框架的工程師忽略了真實人腦神經(jīng)元的一些特性,而科技界才剛剛開始明白這些特性非常重要。神經(jīng)元通過將動作電位(action potentials)或“峰電位”(spikes)信號發(fā)送到身體的各個部位來進行交流,這就造成了神經(jīng)元傳輸?shù)臅r間延遲。個體神經(jīng)元之間在傳遞信息的速度上也有差異,有些快,有些慢。許多神經(jīng)元在決定是否放電時,似乎會密切關(guān)注它們接收到的脈沖的時機。

“人工神經(jīng)網(wǎng)絡(luò)有這個屬性,即所有神經(jīng)元完全相同,但大腦中的神經(jīng)元卻有不同形態(tài),這讓我意識到,人腦神經(jīng)元的差異性不是無關(guān)緊要的,”布里斯托大學(University of Bristol)的神經(jīng)系統(tǒng)科學家鮑爾斯(Jeffrey Bowers)說。他正在調(diào)查大腦哪些方面的功能未被當前人工神經(jīng)網(wǎng)絡(luò)所采用。

另一個不同之處在于,人工合成神經(jīng)網(wǎng)絡(luò)是通過一系列人工神經(jīng)元層向一個方向傳輸信號。但斯特林格說,“在人類大腦皮層中,自上而下的連接和自下而上的神經(jīng)元連接是一樣多?!?/p>

為了更好地理解人腦的工作原理,他的實驗室對人腦進行了計算機模擬。當他們最近調(diào)整他們的模擬,將這些關(guān)于真實神經(jīng)元的時間和組織的信息整合到一起,然后用一系列的視覺圖像對計算機進行訓練時,他們發(fā)現(xiàn)計算機的模擬處理信息的方式發(fā)生了根本性的轉(zhuǎn)變。

他們開始看到更復雜的活動模式的出現(xiàn),而不是所有神經(jīng)元同時放電。其中一個人工神經(jīng)元子群其作用似乎是信息守門人。這個神經(jīng)元子群只有在整個系統(tǒng)所接受的某個視覺場景的所有低級和高級特性信息同時到達時才會放電。

斯特林格認為,這些“捆綁神經(jīng)元”的行為就像大腦中的結(jié)婚證,使神經(jīng)元之間的關(guān)系正式化,并提供了一種方法來驗證兩個看似相關(guān)的信號是否真的相關(guān)。通過這種方式,大腦可以檢測出現(xiàn)在視覺場景中的兩條對角線和一條曲線是否真的代表了一個特征,比如貓的耳朵,或者是完全不相關(guān)的東西。

斯特林格說, “我們的假設(shè)是,視覺大腦中呈現(xiàn)的捆綁特征,以及在我們的生物強化神經(jīng)網(wǎng)絡(luò)中的復制,可能在增強生物視覺的穩(wěn)健性方面發(fā)揮重要作用,包括對物體、面孔和人類行為的識別?!?/p>

斯特林格的研究小組目前正在尋找證據(jù),證明真實的人類大腦中存在這樣的神經(jīng)元。他們還在開發(fā)“混合”神經(jīng)網(wǎng)絡(luò),將這些新信息結(jié)合進人工神經(jīng)網(wǎng)絡(luò),看看是否能產(chǎn)生一種更強大的機器學習形式。

鮑爾斯說, “目前還不清楚這是否在真的大腦中發(fā)生,但這確實很吸引人,并突出了一些有趣的可能性?!?/p>

斯特林格的團隊將要測試的一件事是,他們受生物大腦啟發(fā)的神經(jīng)網(wǎng)絡(luò)是否能夠可靠地區(qū)分一個老人是在家中跌倒,或只是坐著不動,或者是正在放下購買的日用品。

斯特林格說,“對于今天的機器視覺算法來說,這仍然是一個非常困難的問題,然而對人腦則是輕而易舉之事?!彼€與位于英國威爾特郡(Wiltshire)波頓唐(Porton Down)的國防科技實驗室(Defence Science and Technology Laboratory)合作,開發(fā)他神經(jīng)系統(tǒng)框架的下一代增強版。這個增強版可以用于軍事,比如從安裝在自動無人機上的智能攝像頭中發(fā)現(xiàn)敵方坦克。

斯特林格的目標是在20年內(nèi)將老鼠等級的智能賦予一臺機器。不過他承認創(chuàng)造人類水平的機器智能可能需要一生的時間,甚至更長。

麥德里同意,受神經(jīng)科學啟示是解決當前機器學習算法問題的有趣方法。

他說,“越來越清楚的是,大腦的工作方式與我們現(xiàn)有的機器深度學習模式非常不同,因此,最終可能會走上一條完全不同的路才能成功。很難說可行性有多大,以及取得成功需要多長時間?!?/p>

與此同時,對于越來越多人工智能驅(qū)動的機器人、汽車和程序,我們可能需要避免對其過于信任。因為你永遠不知道人工智能是不是正在產(chǎn)生被誤導的視覺。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 機器人
    +關(guān)注

    關(guān)注

    210

    文章

    28103

    瀏覽量

    205852
  • 人工智能
    +關(guān)注

    關(guān)注

    1789

    文章

    46652

    瀏覽量

    237090

原文標題:人工智能缺陷與誤覺:讓機器產(chǎn)生幻覺的“怪異事件”

文章出處:【微信號:worldofai,微信公眾號:worldofai】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    《AI for Science:人工智能驅(qū)動科學創(chuàng)新》第6章人AI與能源科學讀后感

    、優(yōu)化等方面的應(yīng)用有了更清晰的認識。特別是書中提到的基于大數(shù)據(jù)和機器學習的能源管理系統(tǒng),通過實時監(jiān)測和分析能源數(shù)據(jù),實現(xiàn)了能源的高效利用和智能化管理。 其次,第6章通過多個案例展示了人工智能在能源科學中
    發(fā)表于 10-14 09:27

    AI for Science:人工智能驅(qū)動科學創(chuàng)新》第4章-AI與生命科學讀后感

    很幸運社區(qū)給我一個閱讀此書的機會,感謝平臺。 《AI for Science:人工智能驅(qū)動科學創(chuàng)新》第4章關(guān)于AI與生命科學的部分,為我們揭示了人工智能技術(shù)在生命科學領(lǐng)域中的廣泛應(yīng)用和深遠影響。在
    發(fā)表于 10-14 09:21

    《AI for Science:人工智能驅(qū)動科學創(chuàng)新》第一章人工智能驅(qū)動的科學創(chuàng)新學習心得

    人工智能:科學研究的加速器 第一章清晰地闡述了人工智能作為科學研究工具的強大功能。通過機器學習、深度學習等先進技術(shù),AI能夠處理和分析海量數(shù)據(jù),發(fā)現(xiàn)傳統(tǒng)方法難以捕捉的模式和規(guī)律。這不僅極大地提高了數(shù)據(jù)處理
    發(fā)表于 10-14 09:12

    risc-v在人工智能圖像處理應(yīng)用前景分析

    和使用該技術(shù),無需支付專利費使用費。這大大降低了人工智能圖像處理技術(shù)的研發(fā)成本,并吸引了大量的開發(fā)者、企業(yè)和研究機構(gòu)參與其生態(tài)建設(shè)。 靈活性則體現(xiàn)在RISC-V可以根據(jù)不同的應(yīng)用場景進行定制和優(yōu)化,從而
    發(fā)表于 09-28 11:00

    人工智能ai 數(shù)電 模電 模擬集成電路原理 電路分析

    人工智能ai 數(shù)電 模電 模擬集成電路原理 電路分析 想問下哪些比較容易學 不過好像都是要學的
    發(fā)表于 09-26 15:24

    人工智能ai4s試讀申請

    目前人工智能在繪畫對話等大模型領(lǐng)域應(yīng)用廣闊,ai4s也是方興未艾。但是如何有效利用ai4s工具助力科研是個需要研究的課題,本書對ai4s基本原理和原則,方法進行描訴,有利于總結(jié)經(jīng)驗,擬按照要求準備相關(guān)體會材料??茨芊裼兄谌腴T和提高ss
    發(fā)表于 09-09 15:36

    名單公布!【書籍評測活動NO.44】AI for Science:人工智能驅(qū)動科學創(chuàng)新

    ! 《AI for Science:人工智能驅(qū)動科學創(chuàng)新》 這本書便將為讀者徐徐展開AI for Science的美麗圖景,與大家一起去了解: 人工智能究竟幫科學家做了什么? 人工智能將如何改變我們所生
    發(fā)表于 09-09 13:54

    報名開啟!深圳(國際)通用人工智能大會將啟幕,國內(nèi)外大咖齊聚話AI

    8月28日至30日,2024深圳(國際)通用人工智能大會暨深圳(國際)通用人工智能產(chǎn)業(yè)博覽會將在深圳國際會展中心(寶安)舉辦。大會以“魅力AI·無限未來”為主題,致力于打造全球通用人工智能領(lǐng)域集產(chǎn)品
    發(fā)表于 08-22 15:00

    FPGA在人工智能中的應(yīng)用有哪些?

    FPGA(現(xiàn)場可編程門陣列)在人工智能領(lǐng)域的應(yīng)用非常廣泛,主要體現(xiàn)在以下幾個方面: 一、深度學習加速 訓練和推理過程加速:FPGA可以用來加速深度學習的訓練和推理過程。由于其高并行性和低延遲特性
    發(fā)表于 07-29 17:05

    機器視覺和人工智能的關(guān)系與應(yīng)用

    機器視覺和人工智能的關(guān)系是一個廣泛而深入的話題,涉及到計算機科學、電子工程、光學、圖像處理、模式識別等多個領(lǐng)域。 一、機器視覺和人工智能的定義 機器
    的頭像 發(fā)表于 07-16 10:27 ?714次閱讀

    5G智能物聯(lián)網(wǎng)課程之Aidlux下人工智能開發(fā)(SC171開發(fā)套件V2)

    ://t.elecfans.com/v/27221.html *附件:初學者完整學習流程實現(xiàn)手寫數(shù)字識別案例_V2-20240506.pdf 人工智能 語音對話機器人案例 26分03秒 https
    發(fā)表于 05-10 16:46

    機器學習怎么進入人工智能

    人工智能已成為一個熱門領(lǐng)域,涉及到多個行業(yè)和領(lǐng)域,例如語音識別、機器翻譯、圖像識別等。 在編程中進行人工智能的關(guān)鍵是使用機器學習算法,這是一類基于樣本數(shù)據(jù)和模型訓練來進行預(yù)測和判斷的
    的頭像 發(fā)表于 04-04 08:41 ?232次閱讀

    5G智能物聯(lián)網(wǎng)課程之Aidlux下人工智能開發(fā)(SC171開發(fā)套件V1)

    *附件:初學者完整學習流程實現(xiàn)手寫數(shù)字識別案例.pdf 人工智能 語音對話機器人案例 26分03秒 https://t.elecfans.com/v/27185.html *附件:語音對話機器
    發(fā)表于 04-01 10:40

    嵌入式人工智能的就業(yè)方向有哪些?

    聯(lián)網(wǎng)ARM開發(fā) NB-IoT開發(fā)及實戰(zhàn) 七:python工程師,人工智能工程師 python語法基礎(chǔ) python核心編程 基于OpenCV的機器視覺開發(fā) 嵌入式人工智能滲入生活的方方面面,廣泛應(yīng)用
    發(fā)表于 02-26 10:17

    人工智能在軟件測試中的應(yīng)用

    測試中的應(yīng)用。 人工智能在軟件測試中的應(yīng)用可以有效地提高測試的效率和準確性。通過機器學習、自然語言處理、模式識別等人工智能技術(shù),測試工具可以自動分析軟件的代碼、性能、功能等各方面指標,并發(fā)現(xiàn)其中的
    的頭像 發(fā)表于 12-26 11:02 ?568次閱讀