0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Microchip CEO博文《AI將如何重新定義數(shù)據(jù)中心?》

Microchip微芯 ? 來源:Microchip ? 作者:Microchip ? 2023-12-11 14:50 ? 次閱讀

AI已經(jīng)存在了一段時間,其影響也相當(dāng)巨大。生成式AI剛開始嶄露頭角,對于其如何顛覆世界的種種預(yù)言已經(jīng)迅速成為熱門話題,影響之深廣,令人深思。

這項(xiàng)技術(shù)已經(jīng)對數(shù)據(jù)中心產(chǎn)生了重大影響?;诒仨氃谠贫擞?xùn)練和運(yùn)行的模型的大小,生成式AI的基礎(chǔ)設(shè)施需求預(yù)計(jì)將比早期AI模型高出10到100倍。事實(shí)上,所有數(shù)據(jù)中心基礎(chǔ)設(shè)施都受到這一趨勢的影響,包括電力、HVAC、網(wǎng)絡(luò)和物理布局。數(shù)據(jù)中心將如何擴(kuò)展規(guī)模以適應(yīng)呈指數(shù)級增長的生成式AI大型語言模型?

生成式AI的成功可能取決于半導(dǎo)體行業(yè)對以下幾個方面的關(guān)注,一是先進(jìn)的AI處理器,二是如何存儲和處理所有這些數(shù)據(jù),最后是確保數(shù)據(jù)中心散熱更佳、更高效且更安全。

我們已經(jīng)解決了這類問題,以便數(shù)據(jù)中心運(yùn)營商能夠?yàn)?a href="http://www.ttokpm.com/v/tag/1225/" target="_blank">5G、云服務(wù)和新一代的AI/ML應(yīng)用提供支持。我們的單片機(jī)、存儲器、PCIe開關(guān)、安全解決方案和其他產(chǎn)品提供了各種解決方案,以應(yīng)對從連接AI處理卡到優(yōu)化數(shù)據(jù)訪問、存儲、安全和保護(hù)等一系列AI挑戰(zhàn),同時提供必要的帶寬、端口密度和連接能力,從而處理不斷增加的流量。

類似的挑戰(zhàn)也適用于數(shù)據(jù)中心和本地服務(wù)器中的生成式AI,其應(yīng)對難度也進(jìn)一步放大。生成式AI似乎也存在一種途徑,能夠擴(kuò)展到物聯(lián)網(wǎng)應(yīng)用中的網(wǎng)絡(luò)邊緣,如患者監(jiān)測和汽車交通違規(guī)檢測。有些人認(rèn)為,如果生成式AI產(chǎn)生的海量數(shù)據(jù)必須在云端而不是在邊緣處理,那么這些應(yīng)用便無法取得成功。

如今的邊緣AI解決方案可能為生成式AI提供了一種路線圖。語音識別系統(tǒng)和AI攝像頭等計(jì)算機(jī)視覺產(chǎn)品可在邊緣提供許多優(yōu)勢,包括消除網(wǎng)絡(luò)延遲和將隱私控制權(quán)交還給用戶。它們有助于降低功耗,因?yàn)橹挥性?a target="_blank">檢測到不規(guī)則的變化后才會將視頻流傳輸?shù)皆贫?,而不是像“傻瓜”攝像頭那樣連續(xù)不斷地傳輸??梢灶A(yù)計(jì),未來的邊緣設(shè)備也會采用這種方案。

但是,將生成式AI引入到邊緣將比引入傳統(tǒng)AI更加困難。由于數(shù)據(jù)量更大,電力問題將變得更具挑戰(zhàn)性。硬件需求將遠(yuǎn)遠(yuǎn)超過傳統(tǒng)AI所需,并且解決方案還需要為智能邊緣的電池供電、深度嵌入式設(shè)備提供必要的安全性和其他獨(dú)特功能。

我們已經(jīng)關(guān)注到這些挑戰(zhàn)。例如,我們正在探索如何利用當(dāng)前的Wi-Fi設(shè)備實(shí)現(xiàn)串行端口到生成式AI的橋接。在這種情況下,生成式AI并非在邊緣實(shí)現(xiàn),而是通過8位單片機(jī)的UART訪問。單片機(jī)會產(chǎn)生一個實(shí)時傳感器數(shù)據(jù)穿插其中的預(yù)定義提示語,將其發(fā)送到生成式AI解決方案,然后根據(jù)回答采取行動。目前,尚不明確端點(diǎn)能否在邊緣獨(dú)立運(yùn)行生成式AI而不回調(diào)至數(shù)據(jù)中心,但我們正處于創(chuàng)新的早期階段。

與我們服務(wù)的任何市場一樣,Microchip的目標(biāo)是盡可能簡化解決行業(yè)中一些最基本的系統(tǒng)設(shè)計(jì)挑戰(zhàn)。這包括提供豐富的產(chǎn)品組合,以便客戶能夠采用全面系統(tǒng)解決方案的方法實(shí)現(xiàn)創(chuàng)新。我們會幫助解決在需要新功能的成熟應(yīng)用中遇到的挑戰(zhàn),同時也為長期的安全性、保護(hù)性和可靠性要求提供支持。針對生成式AI等最新的新興技術(shù),我們也會采取同樣的做法,這些技術(shù)描繪了令人期待的未來,但在兌現(xiàn)承諾之前,這些技術(shù)仍然面臨著相同的基本系統(tǒng)設(shè)計(jì)挑戰(zhàn)。


聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • microchip
    +關(guān)注

    關(guān)注

    52

    文章

    1492

    瀏覽量

    117332
  • 數(shù)據(jù)中心
    +關(guān)注

    關(guān)注

    16

    文章

    4515

    瀏覽量

    71610
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    28860

    瀏覽量

    266176
  • 生成式AI
    +關(guān)注

    關(guān)注

    0

    文章

    463

    瀏覽量

    409

原文標(biāo)題:CEO博文《AI將如何重新定義數(shù)據(jù)中心?》

文章出處:【微信號:MicrochipTechnology,微信公眾號:Microchip微芯】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    單片機(jī)中宏定義重新定義數(shù)據(jù)類型(typedef)區(qū)別

    單片機(jī)中宏定義重新定義數(shù)據(jù)類型(typedef)區(qū)別,并且各自的優(yōu)勢(初學(xué)單片機(jī))eg:#define SKY unsigned chartypedef unsigned char SKY
    發(fā)表于 08-27 20:21

    數(shù)據(jù)中心太耗電怎么辦

    ??????摘要:其實(shí)對于節(jié)能,傳統(tǒng)技術(shù)也是做了“十二分”的努力。但是在技術(shù)不斷演進(jìn)的情況下,傳統(tǒng)節(jié)能技術(shù)還是存在問題,如何破?本文分享自華為云社區(qū)《數(shù)據(jù)中心節(jié)能?來試試華為NAIE數(shù)據(jù)中心節(jié)能技術(shù)
    發(fā)表于 06-30 06:27

    數(shù)據(jù)中心是什么

    數(shù)據(jù)中心是什么:數(shù)據(jù)中心是全球協(xié)作的特定設(shè)備網(wǎng)絡(luò),用來在因特網(wǎng)絡(luò)基礎(chǔ)設(shè)施上傳遞、加速、展示、計(jì)算、存儲數(shù)據(jù)信息。數(shù)據(jù)中心大部分電子元件都是由低直流電源驅(qū)動運(yùn)行的。
    發(fā)表于 07-12 07:10

    什么是數(shù)據(jù)中心

    數(shù)據(jù)中心是企業(yè)用來容納其關(guān)鍵業(yè)務(wù)應(yīng)用程序和信息的物理設(shè)施。隨著它們的發(fā)展,重要的是要長期考慮如何保持它們的可靠性和安全性。什么是數(shù)據(jù)中心數(shù)據(jù)中心通常被稱為單個事物,但實(shí)際上它們由許多技...
    發(fā)表于 09-15 06:46

    通過高壓創(chuàng)新重新定義電源管理

    通過高壓創(chuàng)新重新定義電源管理,感興趣的可以瞧一瞧。
    發(fā)表于 11-16 15:22 ?1次下載
    通過高壓創(chuàng)新<b class='flag-5'>重新定義</b>電源管理

    微軟部署水下數(shù)據(jù)中心重新定義“水冷”

    多年來,微軟一直致力于水下數(shù)據(jù)中心的研究。早在2015年,該公司就在加州推出了水下數(shù)據(jù)中心原型?,F(xiàn)在這個水下數(shù)據(jù)中心包含12排電腦,總共有864臺服務(wù)器,它將由一條連接歐洲海洋能源中心
    發(fā)表于 07-14 10:47 ?790次閱讀

    重新定義ADC在無線領(lǐng)域的角色

    重新定義ADC在無線領(lǐng)域的角色
    發(fā)表于 05-26 16:23 ?1次下載
    <b class='flag-5'>重新定義</b>ADC在無線領(lǐng)域的角色

    現(xiàn)代工作負(fù)載正在重新定義下一代數(shù)據(jù)中心

    目前數(shù)據(jù)中心容納了全球約三分之一的數(shù)據(jù)。2020年的數(shù)據(jù)量大約是20ZB,預(yù)計(jì)到2025年都將保持15-20%的年增長率。數(shù)據(jù)中心面臨的挑戰(zhàn)不僅包括需要支持海量的
    的頭像 發(fā)表于 06-21 14:15 ?753次閱讀

    通過高壓創(chuàng)新 重新定義電源管理

    通過高壓創(chuàng)新 重新定義電源管理
    發(fā)表于 11-02 08:16 ?0次下載
    通過高壓創(chuàng)新 <b class='flag-5'>重新定義</b>電源管理

    邊緣計(jì)算如何重新定義 IIoT 應(yīng)用程序

    邊緣計(jì)算如何重新定義 IIoT 應(yīng)用程序
    的頭像 發(fā)表于 01-03 09:45 ?656次閱讀
    邊緣計(jì)算如何<b class='flag-5'>重新定義</b> IIoT 應(yīng)用程序

    AI2.0時代,工業(yè)視覺正被重新定義

    【工業(yè)實(shí)踐干貨分享】AI2.0時代,工業(yè)視覺正被重新定義
    的頭像 發(fā)表于 04-12 13:40 ?1136次閱讀
    <b class='flag-5'>AI</b>2.0時代,工業(yè)視覺正被<b class='flag-5'>重新定義</b>

    軟件定義數(shù)據(jù)中心

    電子發(fā)燒友網(wǎng)站提供《軟件定義數(shù)據(jù)中心.pdf》資料免費(fèi)下載
    發(fā)表于 08-10 16:10 ?0次下載
    軟件<b class='flag-5'>定義</b><b class='flag-5'>數(shù)據(jù)中心</b>

    AI化革命:大廠如何重新定義數(shù)據(jù)中心的未來

    人工智能應(yīng)用通常需要大規(guī)模的高性能計(jì)算資源,包括GPU和TPU等加速器。因此,數(shù)據(jù)中心需要具備足夠的計(jì)算能力來支持這些應(yīng)用的訓(xùn)練和推理。這意味著數(shù)據(jù)中心需要更多的服務(wù)器和更強(qiáng)大的網(wǎng)絡(luò)基礎(chǔ)設(shè)施,以確保高性能計(jì)算任務(wù)能夠順暢執(zhí)行。
    的頭像 發(fā)表于 10-10 16:29 ?738次閱讀
    <b class='flag-5'>AI</b>化革命:大廠如何<b class='flag-5'>重新定義</b><b class='flag-5'>數(shù)據(jù)中心</b>的未來

    墨芯人工智能CEO王維:需要重新定義和設(shè)計(jì)AI計(jì)算機(jī)

    AI時代,我們需要重新定義和設(shè)計(jì)AI計(jì)算機(jī)。僅依靠硅基的摩爾定律,2年翻一倍的線性增長的算力供給遠(yuǎn)不能滿足指數(shù)級增長的需求問題。
    的頭像 發(fā)表于 01-12 11:12 ?922次閱讀

    AI時代,我們需要怎樣的數(shù)據(jù)中心AI重新定義數(shù)據(jù)中心

    超過60%的中國企業(yè)計(jì)劃在未來12至24個月內(nèi)部署生成式人工智能。AI、模型的構(gòu)建,將顛覆數(shù)據(jù)中心基礎(chǔ)設(shè)施的建設(shè)、運(yùn)維和運(yùn)營。一個全新的數(shù)據(jù)中心智能化時代已經(jīng)拉開序幕。
    發(fā)表于 07-16 11:33 ?283次閱讀
    <b class='flag-5'>AI</b>時代,我們需要怎樣的<b class='flag-5'>數(shù)據(jù)中心</b>?<b class='flag-5'>AI</b><b class='flag-5'>重新定義</b><b class='flag-5'>數(shù)據(jù)中心</b>