大模型一體機(jī)是在“賣盒子”嗎？

如果要找一個(gè)海內(nèi)外大模型商業(yè)化探索的差異點(diǎn)，“一體機(jī)”應(yīng)該榜上有名。

微軟、谷歌、OpenAI等，主要通過基于云的AI服務(wù)和API接口來實(shí)現(xiàn)商業(yè)化。當(dāng)然也有硬件，比如英偉達(dá)推出的Jetson，就是面向邊緣計(jì)算和AI應(yīng)用的一款設(shè)備，可以用來在邊緣場(chǎng)景中運(yùn)行復(fù)雜的AI模型，但更多的是作為一個(gè)通用的AI計(jì)算平臺(tái)，而不是集成了特定大模型的一體機(jī)。

與之相比，“大模型一體機(jī)”在中國市場(chǎng)的熱度更高。主流AI大模型廠商、ICT服務(wù)商及ISV服務(wù)商，幾乎全部下場(chǎng)了。

AI大模型廠商，如百度的千帆大模型一體機(jī)、科大訊飛的星火一體機(jī)、智譜AI的智譜GLM昇騰大模型一體機(jī)。ICT廠商和ISV服務(wù)商也都在積極推出各種場(chǎng)景化一體機(jī)，比如新華三面向政企客戶的AIGC靈犀一體機(jī)，達(dá)觀數(shù)據(jù)面向企業(yè)市場(chǎng)的“曹植”大模型一體機(jī)，商湯科技的金融大模型檢索問答一體機(jī)，中軟國際面向政府市場(chǎng)的JointPilot“四問（問數(shù)、問視、問策、問服）”系列大模型一體機(jī)等。

大模型一體機(jī)，是一個(gè)非常有意思的賽道。

有人說，大模型一體機(jī)更符合國情，類似于“賣盒子”，也就是軟硬結(jié)合，將軟件帶硬件盒子一起賣給客戶，這在ToB/ToG市場(chǎng)很好用，因?yàn)楦稀芭陌孱I(lǐng)導(dǎo)”的認(rèn)知范圍，不認(rèn)可軟件的價(jià)值，只愿意為看得見摸得著的硬資產(chǎn)付費(fèi)。

大模型一體機(jī)，通過將計(jì)算硬件和AI大模型及相關(guān)支持軟件，緊耦合封裝在一起，方便客戶使用大模型來實(shí)現(xiàn)AI應(yīng)用，可以看作是AI版的“賣盒子”，是一種好的商業(yè)模式嗎？

一體機(jī)里，除了大模型還有什么？

首先有必要搞清楚，大模型一體機(jī)究竟在賣什么？市面上的大模型一體機(jī)，主要由幾個(gè)部分構(gòu)成：

1. 硬件。大模型的訓(xùn)練和推理，需要大量的算力資源，涉及高性能AI硬件。大模型一體機(jī)搭載AI硬件，并針對(duì)模型進(jìn)行優(yōu)化調(diào)校。尤其是國產(chǎn)芯片，有數(shù)據(jù)顯示，通過優(yōu)化，可以將國產(chǎn)芯片性能提升20%-30%，吞吐量提升6-7倍，因此大模型一體機(jī)可以提供更高的算效。

2.大模型。滿足客戶使用大模型、開發(fā)AI應(yīng)用的需求，大模型一體機(jī)中內(nèi)置的大模型也各有特色。這里簡單介紹兩種，一種是單一大模型的一體機(jī)，比如軟通動(dòng)力聯(lián)合百川智能推出的“軟通-百川AI大模型一體機(jī)”，就預(yù)裝了百川大模型。另一種是開源開放的大模型一體機(jī)，提供豐富的基座大模型讓企業(yè)測(cè)試、調(diào)用，比如百度的千帆大模型一體機(jī)，除了內(nèi)置百度自研的文心大模型，也提供Llama、Baichuan、ChatGLM等十余個(gè)主流開源大模型。

3.全棧工具。通用場(chǎng)景的大模型，是無法直接被特定領(lǐng)域、垂直場(chǎng)景來使用的。舉個(gè)例子，很多行業(yè)還沒有高質(zhì)量的語料，一些知識(shí)經(jīng)驗(yàn)還沒有被文本化、數(shù)據(jù)化，導(dǎo)致大模型無法充分學(xué)習(xí)。所以，想要用好大模型，很多企業(yè)還需要有工程師來進(jìn)行數(shù)據(jù)治理，建立高質(zhì)量的行業(yè)語料和知識(shí)庫，做好提示詞工程，開發(fā)業(yè)務(wù)友好的插件……從零搭建起全棧AI開發(fā)能力，有著不小的工程量。而大模型一體機(jī)，針對(duì)垂直場(chǎng)景進(jìn)行過優(yōu)化微調(diào)，集成了易用的平臺(tái)化工具，可以將原本幾個(gè)月的開發(fā)周期縮短到幾天、幾小時(shí)，實(shí)現(xiàn)特定行業(yè)專屬大模型的快速部署。

4.支持服務(wù)。不同于傳統(tǒng)軟件，大模型需要持續(xù)學(xué)習(xí)，根據(jù)人類反饋和數(shù)據(jù)集及時(shí)更新迭代，具有很強(qiáng)的時(shí)效性，需要服務(wù)商更快、更有針對(duì)性地響應(yīng)。而作為整體解決方案出售的大模型一體機(jī)，包含了一定程度的技術(shù)支持和服務(wù)，可以解決企業(yè)長期應(yīng)用大模型的問題。

不難發(fā)現(xiàn)，相比單純售賣AI服務(wù)和API的商業(yè)模式，開箱即用的大模型一體機(jī)，能夠縮短部署周期、深度結(jié)合場(chǎng)景、打消落地門檻，是更符合當(dāng)下產(chǎn)業(yè)現(xiàn)狀的一種選擇，也可以讓更多企業(yè)更快地用好大模型。

大模型一體機(jī)，不等于傳統(tǒng)盒子

國內(nèi)企業(yè)紛紛推出大模型一體機(jī)時(shí)，我所在的一個(gè)行業(yè)群，有人表示：國內(nèi)就是軟件不值錢，硬件值錢。

提供服務(wù)和解決方案的商業(yè)模式，優(yōu)于“賣盒子”，是一個(gè)業(yè)內(nèi)流傳已久的觀念。

尤其是在傳統(tǒng)企業(yè)軟件和云計(jì)算領(lǐng)域，“賣盒子”被認(rèn)為是市場(chǎng)不夠成熟的無奈之選，因?yàn)橐郧昂芏嗉追降念I(lǐng)導(dǎo)不了解軟件技術(shù)，覺得硬件更有科技含量。而在銷售方式上，賣盒子壁壘不高，拼的不是產(chǎn)品創(chuàng)新，而是客情關(guān)系和酒量。商業(yè)回報(bào)上，賣盒子涉及定制成本、人力維護(hù)成本，無法像軟件那樣通過規(guī)?；@得非線性增長，干的都是苦活累活。

既然大模型一體機(jī)，也是將大模型及相關(guān)軟件與硬件集成，作為一個(gè)整體產(chǎn)品出售來“賣盒子”。這種商業(yè)模式究竟好不好呢？

這里要明確，盡管都是將軟硬件集成在一起售賣，但此一時(shí)彼一時(shí)，大模型一體機(jī)并不能等同于傳統(tǒng)的“賣盒子”模式。

從市場(chǎng)源頭的需求驅(qū)動(dòng)力來看，購買一體機(jī)的用戶，并非“不懂大模型”。

認(rèn)為“賣盒子”比“賣軟件服務(wù)”low，往往是覺得ToB市場(chǎng)的很多客戶不懂軟件，不明白為什么一張license要賣那么貴，必須封裝到盒子里才肯買單。

但今時(shí)今日，隨著數(shù)字化、智能化的深入，各行各業(yè)的企業(yè)決策者，很少有人不認(rèn)可大模型的價(jià)值，不認(rèn)可數(shù)據(jù)工程、知識(shí)工程等“軟實(shí)力”之于AI落地的意義。恰恰相反，大模型一體機(jī)的市場(chǎng)崛起，正是因?yàn)閷?duì)應(yīng)用大模型、開發(fā)專屬大模型的迫切渴求。

如果說以前“賣盒子”有點(diǎn)買櫝還珠的味道，那么現(xiàn)在，一體機(jī)中大模型這顆“明珠”在企業(yè)市場(chǎng)的認(rèn)可度，是毋庸置疑的。

除了“軟實(shí)力”的價(jià)值受到認(rèn)可，大模型一體機(jī)的硬件，也更加多元化。

“賣盒子”的另一類訴求是，將硬件作為企業(yè)資產(chǎn)的一部分，更好估價(jià)，導(dǎo)致了硬件過度堆砌、脫離業(yè)務(wù)實(shí)際需求的情況。顯然，大模型一體機(jī)市場(chǎng)，也并不是這樣的。

我們注意到，大模型一體機(jī)的供應(yīng)商，普遍會(huì)提供多種部署方案，既有低成本的輕量級(jí)一體機(jī)，也有針對(duì)大中型客戶的定制化高配一體機(jī)，相當(dāng)于中杯、大杯和超大杯。企業(yè)完全可以立足于業(yè)務(wù)場(chǎng)景的實(shí)際需求，選擇最適合自己的硬件版本，無需重度投入過多的硬件資源。

“不是高配一體機(jī)買不起，而是輕量一體機(jī)更有性價(jià)比”，價(jià)值導(dǎo)向、實(shí)用導(dǎo)向驅(qū)動(dòng)的大模型一體機(jī)，拼的主要是產(chǎn)品力，在供給和銷售策略上也更合理、更市場(chǎng)化。

另外值得一提的是，“賣盒子”曾被認(rèn)為是迎合了中國企業(yè)缺乏“安全感”的心理，進(jìn)行（沒有太大必要的）私有化本地部署。那么，支持本地部署、強(qiáng)調(diào)數(shù)據(jù)隔離與安全保障的大模型一體機(jī)，有必要嗎？

相信了解大模型技術(shù)的讀者，都會(huì)很快做出判斷：很有必要。

大模型不同于傳統(tǒng)的軟件技術(shù)，其訓(xùn)練和推理都會(huì)涉及大量重要隱私數(shù)據(jù)，又存在“幻覺”問題，對(duì)數(shù)據(jù)監(jiān)管和內(nèi)容安全的擔(dān)憂并非杞人憂天。

而大模型一體機(jī)的本地私有化部署，可以幫助企業(yè)實(shí)現(xiàn)數(shù)據(jù)隔離與網(wǎng)絡(luò)隔離，減少數(shù)據(jù)傳輸及存儲(chǔ)的風(fēng)險(xiǎn)，確保數(shù)據(jù)資產(chǎn)的安全性。不打消客觀存在的安全顧慮，大模型是很難落地到“最后一公里”的。

所以，大模型一體機(jī)并不等于傳統(tǒng)的“賣盒子”，而是從復(fù)雜產(chǎn)業(yè)實(shí)際出發(fā)的一種選擇。

大模型一體機(jī)，到底誰在用？

當(dāng)然，大模型一體機(jī)確有其用，并不意味著每一個(gè)開發(fā)者、每一家企業(yè)都適合。

相比大模型一體機(jī)少則幾萬、多則幾十萬的前期投入成本，通過API調(diào)用次數(shù)或計(jì)算資源計(jì)費(fèi)，一個(gè)token只需要幾分錢，初始成本更低。那么，這大模型一體機(jī)到底是誰在用?。?/p>

有三類群體，應(yīng)該將大模型一體機(jī)的集成方案，作為重點(diǎn)考量：

一是風(fēng)險(xiǎn)敏感型。

包括數(shù)據(jù)隱私安全風(fēng)險(xiǎn)，以及供應(yīng)鏈斷鏈風(fēng)險(xiǎn)。軟硬件協(xié)同優(yōu)化的一體機(jī)，可以讓AI大模型在國產(chǎn)硬件上也有不錯(cuò)的性能表現(xiàn)。對(duì)于有信創(chuàng)需求的企事業(yè)單位，是更優(yōu)解。

公開報(bào)道顯示，基于昇騰AI硬件底座的軟通AI訓(xùn)推一體化平臺(tái)，就受到央國企、科技機(jī)構(gòu)、教育、金融等領(lǐng)域客戶的認(rèn)可。

二是長期運(yùn)營型。

一位開發(fā)者朋友，在調(diào)用了GPT4-Turbo之后表示：“太燒錢了！” 他所用的非代碼調(diào)用場(chǎng)景，一次要花費(fèi)0.5元，長期用是不可承受的，于是選擇了能力更低的GPT-3.5+其他模型的組合拳。

大模型API基于token使用量的計(jì)費(fèi)方式，雖然初始階段看起來成本更低，但總體擁有成本（TCO）卻未必。實(shí)踐看來，企業(yè)應(yīng)用AI，并不意味著所有任務(wù)都要使用云端先進(jìn)大模型的完整能力。

大模型一體機(jī)提供的更豐富的模型選型、本地化部署、優(yōu)化過的性能保障，可能讓企業(yè)AI開發(fā)應(yīng)用的全生命周期，打好“組合拳”。

三是非AI原生型。

大模型火爆之后，很多行業(yè)和企業(yè)才開始關(guān)注AI、使用AI，沒有積累相關(guān)的開發(fā)能力和人才，對(duì)技術(shù)也是一知半解，這時(shí)候想要在自身的業(yè)務(wù)場(chǎng)景中快速上馬大模型，可能要面臨短期內(nèi)資源緊缺的溢價(jià)情況，被迫在算力市場(chǎng)、人才市場(chǎng)進(jìn)行競(jìng)價(jià)，試錯(cuò)成本更高。這時(shí)候，通過大模型一體機(jī)的小時(shí)級(jí)一站式交付、即插即用，可以快速試錯(cuò)。

比如一個(gè)普惠版的大模型一體機(jī)，不需要A100這類高端顯卡，就可以幫助企業(yè)打造一個(gè)專屬大模型，開發(fā)出小型的知識(shí)庫應(yīng)用或AIGC類應(yīng)用，讓業(yè)務(wù)智能化起來，讓大模型不再遙遠(yuǎn)。

大模型的商業(yè)化探索還處于早期，用傳統(tǒng)的眼光去看待新興事物，未嘗不是一種刻舟求劍。大模型不一定要捆綁硬件來凸顯價(jià)值，但一定要結(jié)合硬件來充分釋放價(jià)值。

從這個(gè)角度來說，大模型一體機(jī)的商業(yè)內(nèi)核，與以往的“賣盒子”有本質(zhì)的不同，或許能為企業(yè)市場(chǎng)帶來一種全新的商業(yè)機(jī)遇。