0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

OpenAI強(qiáng)化內(nèi)部安全流程,應(yīng)對有害人工智能威脅

微云疏影 ? 來源:綜合整理 ? 作者:綜合整理 ? 2023-12-20 09:48 ? 次閱讀

12 月 19 日,OpenAI宣布加緊內(nèi)部安全防護(hù)工作,設(shè)立“安全顧問小組”以防范有害人工智能的潛在威脅。這一舉措意味著技術(shù)團(tuán)隊(duì)之上增加新的“守護(hù)者”,為領(lǐng)導(dǎo)層提供專業(yè)意見,且擁有董事會的否決權(quán)。

OpenAI將針對每個(gè)模型在網(wǎng)絡(luò)安全、說服力(如虛假信息)、模型自主性以及 CBRN(化學(xué)、生物、放射性和核威脅,如制造新病原體的可能性)等四個(gè)方面進(jìn)行風(fēng)險(xiǎn)評級。

為了防止某些問題得不到充分討論或處理,OpenAI設(shè)定了多種可能的緩解策略,例如模型拒絕教授如何制作凝固汽油或管式炸彈的傳授。對于評級認(rèn)定為“高風(fēng)險(xiǎn)”的模型,將禁止其發(fā)布;而若模型存在“關(guān)鍵風(fēng)險(xiǎn)”,則終止其后續(xù)研發(fā)。

然而,負(fù)責(zé)研發(fā)模型的人員并非最佳安全評估和建議者。為此,OpenAI正籌建一支“跨職能安全咨詢小組”,涉足技術(shù)領(lǐng)域,審查研究人員報(bào)告,從更全面的視角提供建議,發(fā)掘此前未曾意識到的隱憂。

這個(gè)過程要求安全專家的意見同步反饋至董事會及領(lǐng)導(dǎo)層,領(lǐng)導(dǎo)層將權(quán)衡利弊并作出決定;盡管董事會享有最終決定權(quán),但他們也可以隨時(shí)撤回決定,防止?jié)撛诘陌踩[患被忽略。

本次更新的重要焦點(diǎn)在于,OpenAI前任首席執(zhí)行官Sam Altman因模型安全問題被董事會罷免。此次高層人事變動,導(dǎo)致兩位主張謹(jǐn)慎做事的董事Ilya Sutskever和 Helen Toner離任。

然而,業(yè)界仍存擔(dān)憂,若專家小組提出建議、CEO據(jù)此決策,眼下的 OpenAI董事會是否有足夠力量制止此舉?此外,OpenAI允諾引入獨(dú)立第三方審計(jì)體現(xiàn)的透明度問題是否真正得到解決?

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 網(wǎng)絡(luò)安全
    +關(guān)注

    關(guān)注

    10

    文章

    3110

    瀏覽量

    59543
  • 人工智能
    +關(guān)注

    關(guān)注

    1791

    文章

    46691

    瀏覽量

    237179
  • OpenAI
    +關(guān)注

    關(guān)注

    9

    文章

    1034

    瀏覽量

    6379
收藏 人收藏

    評論

    相關(guān)推薦

    OpenAI攜手博通、臺積電打造內(nèi)部芯片

    近日,據(jù)消息人士透露,OpenAI正在與博通和臺積電展開合作,共同研發(fā)其首款內(nèi)部芯片,旨在為其人工智能系統(tǒng)提供更強(qiáng)大的支持。 為應(yīng)對基礎(chǔ)設(shè)施需求的激增,
    的頭像 發(fā)表于 10-31 11:39 ?315次閱讀

    為加速人工智能研發(fā),韓國設(shè)立人工智能研究實(shí)驗(yàn)室

    10月29日資訊,據(jù)國際媒體報(bào)道,OpenAI訓(xùn)練的ChatGPT在全球范圍內(nèi)掀起熱潮后,多個(gè)國家紛紛加大對人工智能領(lǐng)域的投資,通過強(qiáng)化人才培養(yǎng)和基礎(chǔ)設(shè)施建設(shè),積極推動人工智能技術(shù)的研
    的頭像 發(fā)表于 10-30 15:44 ?294次閱讀

    《AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》第6章人AI與能源科學(xué)讀后感

    和國際合作等多個(gè)層面。這些內(nèi)容讓我更加認(rèn)識到,在推動人工智能與能源科學(xué)融合的過程中,需要不斷探索和創(chuàng)新,以應(yīng)對各種挑戰(zhàn)和機(jī)遇。 最后,通過閱讀這一章,我深刻感受到人工智能對于能源科學(xué)的重要性。
    發(fā)表于 10-14 09:27

    美國人工智能受政府監(jiān)管,OpenAI與甲骨文簽署協(xié)議

    隨著美國人工智能產(chǎn)業(yè)逐漸接受政府的指引,OpenAI與甲骨文周四聯(lián)手美國人工智能安全研究所。這一研究所直屬美國商務(wù)部國家標(biāo)準(zhǔn)與技術(shù)研究所,它有權(quán)限在各企業(yè)發(fā)布新模型前或發(fā)布后獲取模型使
    的頭像 發(fā)表于 08-30 15:32 ?630次閱讀

    OpenAI人工智能領(lǐng)域發(fā)展勢頭強(qiáng)勁

    北京時(shí)間8月29日,彭博社援引知情人士消息,揭示了OpenAI即將完成其新一輪融資的重要進(jìn)展。本輪融資由知名投資機(jī)構(gòu)興盛資本(Thrive Capital)領(lǐng)銜,預(yù)計(jì)估值將突破千億美元大關(guān),標(biāo)志著OpenAI人工智能領(lǐng)域的強(qiáng)勁
    的頭像 發(fā)表于 08-29 15:37 ?408次閱讀

    人工智能如何強(qiáng)化智能家居設(shè)備的功能

    ,以配合用戶的生活習(xí)慣與作息。本文將為您介紹人工智能將如何強(qiáng)化智能家居設(shè)備的功能,以及由芯科科技(Silicon Labs)所推出的解決方案,將如何增進(jìn)智能家居設(shè)備的功能性與
    的頭像 發(fā)表于 08-27 10:46 ?812次閱讀
    <b class='flag-5'>人工智能</b>如何<b class='flag-5'>強(qiáng)化</b><b class='flag-5'>智能</b>家居設(shè)備的功能

    FPGA在人工智能中的應(yīng)用有哪些?

    FPGA(現(xiàn)場可編程門陣列)在人工智能領(lǐng)域的應(yīng)用非常廣泛,主要體現(xiàn)在以下幾個(gè)方面: 一、深度學(xué)習(xí)加速 訓(xùn)練和推理過程加速:FPGA可以用來加速深度學(xué)習(xí)的訓(xùn)練和推理過程。由于其高并行性和低延遲特性
    發(fā)表于 07-29 17:05

    5G智能物聯(lián)網(wǎng)課程之Aidlux下人工智能開發(fā)(SC171開發(fā)套件V2)

    https://t.elecfans.com/v/25653.html 人工智能 初學(xué)者完整學(xué)習(xí)流程實(shí)現(xiàn)手寫數(shù)字識別案例_Part1 13分59秒 https://t.elecfans.com/v
    發(fā)表于 05-10 16:46

    5G智能物聯(lián)網(wǎng)課程之Aidlux下人工智能開發(fā)(SC171開發(fā)套件V1)

    ://t.elecfans.com/v/25653.html 人工智能 初學(xué)者完整學(xué)習(xí)流程實(shí)現(xiàn)手寫數(shù)字識別案例 28分55秒 https://t.elecfans.com/v/27184.html
    發(fā)表于 04-01 10:40

    2024 人工智能安全報(bào)告

    近日,奇安信集團(tuán)對外發(fā)布《2024人工智能安全報(bào)告》(以下簡稱《報(bào)告》)。據(jù)悉,這是我國首份人工智能安全報(bào)告?!秷?bào)告》認(rèn)為,人工智能是新一輪
    的頭像 發(fā)表于 03-15 08:26 ?563次閱讀
    2024 <b class='flag-5'>人工智能</b><b class='flag-5'>安全</b>報(bào)告

    知語云智能科技揭秘:無人機(jī)威脅如何破解?國家安全新防線!

    隨著科技的飛速發(fā)展,無人機(jī)技術(shù)已經(jīng)深入到各個(gè)領(lǐng)域,給我們的生活帶來了極大的便利。然而,與此同時(shí),無人機(jī)也帶來了潛在的安全威脅。知語云智能科技作為國內(nèi)領(lǐng)先的智能科技公司,一直致力于研究無
    發(fā)表于 02-27 10:41

    知語云智能科技無人機(jī)防御系統(tǒng):應(yīng)對新興威脅的先鋒力量

    隨著科技的飛速發(fā)展,無人機(jī)技術(shù)在各個(gè)領(lǐng)域的應(yīng)用日益廣泛,但隨之而來的是無人機(jī)威脅的不斷升級。為了有效應(yīng)對這些新興威脅,知語云智能科技推出了先進(jìn)的無人機(jī)防御系統(tǒng),為空中
    發(fā)表于 02-26 16:35

    嵌入式人工智能的就業(yè)方向有哪些?

    嵌入式人工智能的就業(yè)方向有哪些? 在新一輪科技革命與產(chǎn)業(yè)變革的時(shí)代背景下,嵌入式人工智能成為國家新型基礎(chǔ)建設(shè)與傳統(tǒng)產(chǎn)業(yè)升級的核心驅(qū)動力。同時(shí)在此背景驅(qū)動下,眾多名企也紛紛在嵌入式人工智能領(lǐng)域布局
    發(fā)表于 02-26 10:17

    知語云全景監(jiān)測技術(shù):現(xiàn)代安全防護(hù)的全面解決方案

    全景監(jiān)測技術(shù)能夠?qū)崟r(shí)監(jiān)測網(wǎng)絡(luò)流量、用戶行為、系統(tǒng)日志等多維度數(shù)據(jù),通過大數(shù)據(jù)分析和人工智能技術(shù),快速識別異常行為,發(fā)現(xiàn)潛在的安全威脅智能分析,精準(zhǔn)預(yù)警:通過對海量數(shù)據(jù)的深入挖掘和分
    發(fā)表于 02-23 16:40

    OpenAI發(fā)布人工智能文生視頻大模型Sora

    近日,人工智能領(lǐng)域的領(lǐng)軍企業(yè)OpenAI宣布推出其最新的人工智能文生視頻大模型——Sora。這款模型在繼承DALL-E 3卓越畫質(zhì)和遵循指令能力的基礎(chǔ)上,實(shí)現(xiàn)了對真實(shí)物理世界的深度模擬,為視頻制作領(lǐng)域帶來了前所未有的變革。
    的頭像 發(fā)表于 02-20 13:54 ?799次閱讀