英偉達(dá)黃仁勛：GPU加速計(jì)算是發(fā)展方向

今（18）日，英偉達(dá) GTC (GPU 技術(shù)大會(huì)) 2019在蘇州隆重召開，英偉達(dá)創(chuàng)始人兼首席執(zhí)行官黃仁勛依舊是穿著熟悉的皮衣跟大家見面。

會(huì)上，黃仁勛談到，英偉達(dá)在加速計(jì)算領(lǐng)域深耕25年。隨著摩爾定律的終結(jié)，GPU加速計(jì)算將成為未來的發(fā)展方向，這一點(diǎn)現(xiàn)在已得到公認(rèn)。加速計(jì)算可將恰當(dāng)?shù)墓ぞ哂糜谇‘?dāng)?shù)淖鳂I(yè)，這主要包括兩種處理器，一個(gè)擅長(zhǎng)順序單線程處理，另一個(gè)擅長(zhǎng)并行多線程處理。

“而英偉達(dá)可以實(shí)現(xiàn)這些加速，但前提是整個(gè)軟件堆棧均已得到優(yōu)化。優(yōu)化之后，多GPU和多節(jié)點(diǎn)系統(tǒng)可以實(shí)現(xiàn)令人難以置信的性能?！秉S仁勛說到。

據(jù)介紹，英偉達(dá)已經(jīng)售出15億塊GPU，如今在使用的每塊GPU都兼容CUDA。而英偉達(dá)CUDA平臺(tái)具有豐富的庫、工具和應(yīng)用程序。僅在去年，英偉達(dá)就發(fā)布了500多個(gè)SDK和庫，其中既有全新內(nèi)容，也有更新版本。

黃仁勛說到，“我們精益求精，不斷改進(jìn)軟件棧，由此提高了用戶已有PU的性能深度學(xué)習(xí)訓(xùn)練在3年內(nèi)提高4倍，深度學(xué)習(xí)推理在1年內(nèi)提高2倍。”

此外，英偉達(dá)還專注于加速計(jì)算領(lǐng)域，致力于解決普通計(jì)算機(jī)無法解決的問題。

英偉達(dá)在圖形、HPC和AI的交匯領(lǐng)域銳意創(chuàng)新。英偉達(dá)實(shí)時(shí)模擬各種環(huán)境、物理特性和智能。英偉達(dá)在垂直市場(chǎng)中將、深度專業(yè)知識(shí)、計(jì)算堆棧、算法和生態(tài)系統(tǒng)專業(yè)知識(shí)集于一體。

黃仁勛說到，“我們立足一個(gè)架構(gòu)。借此，我們可以涉足多樣化的市場(chǎng)，從游戲到汽車再到醫(yī)療健康?！?/p>

值得一提的是，英偉達(dá)今年為CUDA增加了兩個(gè)新的主流應(yīng)用——5G vRAN和基因組處理。

得益于它們，英偉達(dá)得到了各自行業(yè)全球領(lǐng)導(dǎo)者的支持，其中就包括電信行業(yè)的愛立信和基因組行業(yè)的華大基因。

此外，英偉達(dá)在AI方面同樣有所布局。黃仁勛談到，如今，從運(yùn)輸、醫(yī)療、金融到零售，各行各業(yè)都在爭(zhēng)相利用AI的自動(dòng)化能力。NVIDIA正在為以下每種應(yīng)用場(chǎng)景分別打造一個(gè)平臺(tái)：用于訓(xùn)練的DGX，用于超大規(guī)模云的Hx，用于邊緣的EGX和用于自治系統(tǒng)的AGX。

最后，英偉達(dá)還發(fā)布了TENSORRT7。據(jù)介紹，TensorRT7支持各種類型的RNN，Transformer和CNN。此外，TRT7能夠融合水平和垂直方向的運(yùn)算，可以為開發(fā)者設(shè)計(jì)的大量RNN配置自動(dòng)生成代碼，逐點(diǎn)融合LSTM單元，甚至可跨多個(gè)時(shí)間步長(zhǎng)進(jìn)行融合。并且盡可能做自動(dòng)低精度推理。

相比于TRT5只支持30種變換，TRT7能夠支持1000多種不同的計(jì)算變換和優(yōu)化。

可以這么說，TRT7是英偉達(dá)實(shí)現(xiàn)的最大飛躍。