0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

DeepMind徹底解決人工智能災(zāi)難性遺忘問(wèn)題

cMdW_icsmart ? 來(lái)源:未知 ? 作者:胡薇 ? 2018-09-03 11:11 ? 次閱讀

9月1日消息,據(jù)外媒報(bào)道,暑假后你回到學(xué)校時(shí),可能會(huì)覺(jué)得你已經(jīng)把上一年學(xué)到的知識(shí)都還給了老師。 但是,如果你像人工智能系統(tǒng)那樣學(xué)習(xí)知識(shí),那么你在你每一年的第一天,你的大腦就真的會(huì)拿一個(gè)記憶的橡皮擦,把你之前學(xué)到的所有知識(shí)一點(diǎn)不留的擦掉——真真正正的從零開(kāi)始。而這正是人工智能算法一直以來(lái)的學(xué)習(xí)方法,它從來(lái)不會(huì)真正記住任何東西。

人工智能系統(tǒng)在設(shè)計(jì)上就傾向于在每次開(kāi)始新的學(xué)習(xí)之前,忘記先前學(xué)到的所有東西,這被稱為災(zāi)難性遺忘。

很明顯,這是一個(gè)大問(wèn)題。尖端的學(xué)習(xí)算法大多依賴給定答案的有監(jiān)督學(xué)習(xí)。 例如,面部識(shí)別AI系統(tǒng)將分析人臉的數(shù)千張照片,這些照片已經(jīng)手動(dòng)標(biāo)注好答案以便AI在視頻輸入中能檢測(cè)到人臉。 但是因?yàn)檫@些人工智能算法實(shí)際上并不“理解”他們所做的事情的基本邏輯,所以教導(dǎo)他們做其他任何事情,即使是非常相似的任務(wù),都顯得非常困難。比如說(shuō),讓人工智能去識(shí)別特定的情感,這意味著你要從頭開(kāi)始訓(xùn)練這套模型。 一旦算法被訓(xùn)練,它能做的事情就固定下來(lái)了,我們不能再訓(xùn)練它去做其他事情。

多年來(lái),科學(xué)家們一直試圖弄清楚如何解決這個(gè)問(wèn)題。 如果他們成功,AI系統(tǒng)將能夠從一組新的訓(xùn)練數(shù)據(jù)中學(xué)習(xí),而不會(huì)覆蓋他們?cè)诖诉^(guò)程中已經(jīng)學(xué)習(xí)到的內(nèi)容。 也就是說(shuō),如果機(jī)器人真的有一天會(huì)崛起,我們的新“領(lǐng)主”將能夠在征服地球上的所有生命的同時(shí)吹泡泡糖——同時(shí)做兩件事。

但是,災(zāi)難性的遺忘仍然是阻礙科學(xué)家們研發(fā)出強(qiáng)人工智能(AGI)的主要障礙之一。強(qiáng)人工智能指具有人類級(jí)別的聰明甚至是情感,這包括我們?cè)陔娨暫碗娪爸锌吹降臒o(wú)所不能的,有同情心和想象力的人工智能。

事實(shí)上,上周在布拉格參加人類人工智能峰會(huì)的一些人工智能專家表示,災(zāi)難性遺忘的問(wèn)題是邁向強(qiáng)人工智能最大的障礙之一。而他們并不認(rèn)為近期內(nèi)會(huì)在這方面有所突破。

但谷歌DeepMind的高級(jí)研究科學(xué)家伊琳娜希金斯(Irina Higgins)在會(huì)議的演講上宣布她的團(tuán)隊(duì)已經(jīng)開(kāi)始破解災(zāi)難性遺忘的奧秘。

她開(kāi)發(fā)了一個(gè)AI代理人,這有點(diǎn)像一個(gè)由AI算法控制的電子游戲中的角色。它可以比典型機(jī)器學(xué)習(xí)算法更有創(chuàng)造性地思考。 通過(guò)在虛擬的環(huán)境中經(jīng)歷一些事情,它可以“想象”類似的事情在其他環(huán)境中會(huì)怎樣發(fā)生。 換句話說(shuō),神經(jīng)網(wǎng)絡(luò)能夠從它所處的環(huán)境中抽象出關(guān)鍵物體和事件。

這與人類的想象力不同,我們可以完全想出一些從未見(jiàn)過(guò)的事物。比如,你可以在腦海中想象一只圓圓的、紅色的鳥(niǎo)鳥(niǎo)的樣子。 人工智能系統(tǒng)尚不如人類的大腦復(fù)雜,但它已經(jīng)可以想象已經(jīng)見(jiàn)過(guò)的事情在其他場(chǎng)景中發(fā)生的樣子。

希金斯在由GoodAI組織的會(huì)議上發(fā)言時(shí)說(shuō)道:“我們希望機(jī)器能夠在探索中學(xué)習(xí)安全常識(shí),這樣它就不會(huì)對(duì)自身造成損害?!?。她早些時(shí)候在arXiv上發(fā)表了她的論文,并撰寫(xiě)了一篇相關(guān)的博客文章。

現(xiàn)在,希金斯的人工智能系統(tǒng)可以從五張同一物體的不同角度的照片中“理解”這個(gè)物體,理解物體與環(huán)境的關(guān)系,以及在從未給算法見(jiàn)過(guò)的其他角度下的樣子,或是在不同光線下的呈現(xiàn)的模樣。希金斯的論文重點(diǎn)介紹了如何訓(xùn)練算法來(lái)發(fā)現(xiàn)白色手提箱或扶手椅。 在訓(xùn)練之后,算法可以想象該對(duì)象在一個(gè)全新的虛擬世界中的外觀,并在遇到它時(shí)識(shí)別該對(duì)象。

希金斯說(shuō):“我們呈現(xiàn)一個(gè)圖像給人工智能模型看物體在一個(gè)環(huán)境下的樣子,并要求模型想象這個(gè)物體在不同環(huán)境中會(huì)是什么樣子?!?與其他傳統(tǒng)AI系統(tǒng)相比,她的新算法在識(shí)別從未見(jiàn)過(guò)的物體方面表現(xiàn)優(yōu)異。

簡(jiǎn)而言之,該算法能夠記錄它遇到的內(nèi)容與過(guò)去看到的內(nèi)容之間的差異。 像大多數(shù)人一樣,但與大多數(shù)其他算法不同的是,希金斯為谷歌搭建的新系統(tǒng)可以理解它從沒(méi)有遇到的全新的對(duì)象。通過(guò)從一個(gè)新的角度看待對(duì)象, 它可以使用一些備用計(jì)算能力來(lái)從中提取新信息,更新它對(duì)世界的了解。而這一切無(wú)需重新學(xué)習(xí),也無(wú)需遺忘先前的訓(xùn)練成果 。 換句話說(shuō),這套系統(tǒng)能夠?qū)⑵洮F(xiàn)有知識(shí)轉(zhuǎn)移并應(yīng)用于新環(huán)境。

當(dāng)然,希金斯的模型本身不能把強(qiáng)人工智能變成現(xiàn)實(shí)。 但它標(biāo)志著人工智能算法邁出了重要的一步。從此人工智能算法可以不斷更新,在不丟失已有功能的情況下學(xué)習(xí)有關(guān)世界的新知識(shí)。

希金斯說(shuō):“我認(rèn)為無(wú)遺忘學(xué)習(xí)是接近真正人工智能的道路上至關(guān)重要的一步?!?/p>

這項(xiàng)研究仍處于早期階段。 與許多其他物體識(shí)別AI工具一樣,這些算法只能在一個(gè)系列特定的任務(wù)中進(jìn)行學(xué)習(xí),例如查看照片并在許多不是面部的圖像中挑選出一張臉。 但希金斯新的人工智能系統(tǒng)正在以一種更具創(chuàng)造力和想象力的方式完成這些任務(wù)。

即使希金斯的研究沒(méi)有立即讓我們進(jìn)入強(qiáng)人工智能時(shí)代,她的新算法已經(jīng)能夠改進(jìn)我們一直使用的AI系統(tǒng)。 例如,希金斯在用于訓(xùn)練面部識(shí)別軟件的一組主要數(shù)據(jù)上嘗試了她的新AI系統(tǒng)。 在分析了數(shù)據(jù)集中發(fā)現(xiàn)的數(shù)百萬(wàn)張頭像后,該算法可以生成從未在圖片庫(kù)中出現(xiàn)過(guò)的頭像。 例如,希金斯展示了按膚色排列的頭像集合。

希金斯隨后透露,她的算法也能夠?qū)χ饔^評(píng)價(jià)作出預(yù)測(cè)。比如它可以對(duì)人們對(duì)頭像的評(píng)價(jià)作出判斷。在學(xué)習(xí)了上百萬(wàn)張頭像之后,希金斯的算法繪制了幾副它認(rèn)為 “有吸引力”的頭像:一系列年輕白人女性的頭像。 也就是說(shuō),拋開(kāi)種族問(wèn)題不談,希金斯的算法發(fā)現(xiàn)了人們的審美偏見(jiàn): 白人更具吸引力。

當(dāng)局者迷,旁觀者清,這種創(chuàng)造性的新算法已經(jīng)比人類更善于尋找人類的偏見(jiàn), 之后工程師可以從系統(tǒng)中移除這些偏見(jiàn)。

雖然最新的人工智能算法還不能取代藝術(shù)家,但毫無(wú)疑問(wèn),希金斯團(tuán)隊(duì)的研發(fā)成果是人類邁向強(qiáng)人工智能的一大步。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 人工智能
    +關(guān)注

    關(guān)注

    1787

    文章

    46061

    瀏覽量

    235072
  • DeepMind
    +關(guān)注

    關(guān)注

    0

    文章

    129

    瀏覽量

    10770

原文標(biāo)題:邁向強(qiáng)人工智能:DeepMind讓AI不再遺忘

文章出處:【微信號(hào):icsmart,微信公眾號(hào):芯智訊】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    *** 災(zāi)難性故障,求救,經(jīng)驗(yàn)分享

    我用***不久,出現(xiàn) 災(zāi)難性故障的次數(shù)很多(操作失?。?,有人說(shuō)是盜版,有人說(shuō)是誤操作,有人說(shuō)是電腦內(nèi)存小。請(qǐng)問(wèn)有沒(méi)有人出現(xiàn)過(guò)同樣的問(wèn)題,又有如何的應(yīng)對(duì)方法,分享一下你的經(jīng)驗(yàn),250元的考證,要是出現(xiàn)了這個(gè)問(wèn)題,學(xué)子們又得浪費(fèi)父母的250RMB了,跪求解決!
    發(fā)表于 05-03 14:36

    ***災(zāi)難性故障

    打開(kāi)不了,顯示出Exception EOleException in moudle ***.exe at0036E780.災(zāi)難性故障
    發(fā)表于 10-15 12:10

    人工智能是什么?

    ` 人工智能是什么?什么是人工智能?人工智能是未來(lái)發(fā)展的必然趨勢(shì)嗎?以后人工智能技術(shù)真的能達(dá)到電影里機(jī)器人的智能水平嗎?如果技術(shù)成熟的那一天
    發(fā)表于 09-16 15:40

    百度人工智能大神離職,人工智能的出路在哪?

    ,預(yù)計(jì)2017年產(chǎn)業(yè)規(guī)模達(dá)到295.9億,2018年將達(dá)到381億元。 之前看過(guò)一遍報(bào)道說(shuō)到,人工智能已成為科技界的一顆“明星”。在剛剛閉幕的全國(guó)兩會(huì)上,***工作報(bào)告提出要“全面實(shí)施戰(zhàn)略新興產(chǎn)業(yè)
    發(fā)表于 03-23 17:00

    數(shù)據(jù)對(duì)人工智能發(fā)展的重要

    件事情里特別核心的一件就是大數(shù)據(jù)中心和人工智能算法的整合。讓我們一起來(lái)引領(lǐng)人工智能和大數(shù)據(jù)時(shí)代的來(lái)臨。 在未來(lái)大量數(shù)據(jù)的融入、數(shù)據(jù)中心和云都面臨巨大的變化背景下,F(xiàn)PGA靈活、低遲延、高能效、更強(qiáng)通用
    發(fā)表于 10-09 15:26

    有沒(méi)人在使用AD過(guò)程中出現(xiàn)災(zāi)難性故障啊,怎么解決的?

    有沒(méi)人在使用AD過(guò)程中出現(xiàn)災(zāi)難性故障啊,怎么解決的。我最近使用的AD軟件總是出現(xiàn)
    發(fā)表于 11-20 09:11

    人工智能就業(yè)前景

    據(jù)相關(guān)招聘機(jī)構(gòu)數(shù)據(jù)顯示,2018年AI領(lǐng)域仍然是大部分資深技術(shù)人才轉(zhuǎn)崗的首選目標(biāo),在人才最緊缺的前十大職位中,時(shí)下最火的大數(shù)據(jù)、人工智能、算法類崗位占據(jù)半壁江山。據(jù)調(diào)查指出,2017年技術(shù)研發(fā)類崗位
    發(fā)表于 03-29 15:46

    解讀人工智能的未來(lái)

    `已歷經(jīng)60多年的人工智能在物聯(lián)網(wǎng)以及大數(shù)據(jù)的推動(dòng)下,實(shí)現(xiàn)飛躍式的發(fā)展,并且迎來(lái)了第三個(gè)黃金周期。必優(yōu)傳感今天和大家解讀一下關(guān)于人工智能的未來(lái)。自從有了人工智能,引發(fā)了人類的各種“未來(lái)論”。有人說(shuō)
    發(fā)表于 11-14 10:43

    人工智能醫(yī)生未來(lái)或上線,人工智能醫(yī)療市場(chǎng)規(guī)模持續(xù)增長(zhǎng)

    ,使更多群眾享受到普惠醫(yī)療。   ——預(yù)防慢病。由于慢性病篩查準(zhǔn)確度低、針對(duì)干預(yù)難度大、健康管理工具缺失等醫(yī)療難題,成人對(duì)糖尿病的知曉率僅30.1%。上海瑞金醫(yī)院和人工智能公司第四范式共同推出一款
    發(fā)表于 02-24 09:29

    人工智能:超越炒作

    如果有一個(gè)真正的指標(biāo)可以衡量新技術(shù)的破壞,那肯定是公眾對(duì)恐懼和懷疑的滔滔不絕。如果我們以社會(huì)焦慮作為衡量標(biāo)準(zhǔn),那么目前人工智能(AI)的復(fù)興是開(kāi)創(chuàng)技術(shù)破壞的良好候選者。人工智能將改
    發(fā)表于 05-29 10:46

    未來(lái)的AI 深挖谷歌 DeepMind 和它背后的技術(shù)

    還與WaveNet等公司合作,為人們的生活增加價(jià)值。由于他們所使用的人工智能系統(tǒng)的特殊,深度強(qiáng)化學(xué)習(xí)讓他們成為Google的首選公司。 你期待 DeepMind 還能再做些什么?或看完這篇文章后,想再挖掘
    發(fā)表于 08-26 12:04

    中國(guó)人工智能的現(xiàn)狀與未來(lái)

    中國(guó)人工智能的現(xiàn)狀與未來(lái),人工智能是目前最火熱的技術(shù)領(lǐng)域,也是一門(mén)極富挑戰(zhàn)的科學(xué),從事這項(xiàng)工作的人必須懂得計(jì)算機(jī)知識(shí),數(shù)學(xué)、心理學(xué),甚至哲學(xué)。人工智能是包括十分廣泛的科學(xué),它由不同的
    發(fā)表于 07-27 06:40

    人工智能芯片是人工智能發(fā)展的

    人工智能芯片是人工智能發(fā)展的 | 特倫斯謝諾夫斯基責(zé)編 | 屠敏本文內(nèi)容經(jīng)授權(quán)摘自《深度學(xué)習(xí) 智能時(shí)代的核心驅(qū)動(dòng)力量》從AlphaGo的人機(jī)對(duì)戰(zhàn),到無(wú)人駕駛汽車(chē)的上路,再到AI合成主播上崗
    發(fā)表于 07-27 07:02

    什么叫嵌入式人工智能

    什么是嵌入式人工智能,它的實(shí)際應(yīng)用百度大腦、語(yǔ)音搜索、圖像、廣告跟搜索排序及自動(dòng)駕駛,用一句簡(jiǎn)單的話來(lái)概括就是在云端基于大數(shù)據(jù)、大計(jì)算做人工智能,這看起來(lái)是人工智能的主流。什么叫嵌入式人工智能
    發(fā)表于 10-28 08:43

    Batch的大小、災(zāi)難性遺忘將如何影響學(xué)習(xí)速率

    災(zāi)難性遺忘(Catastrophic Forgetting)”,這也是在較小batch中限制學(xué)習(xí)率的原因。
    的頭像 發(fā)表于 11-14 08:58 ?3393次閱讀