大模型發(fā)展進(jìn)入第二階段，已經(jīng)從通用大模型轉(zhuǎn)向垂直大模型的深度定制，賦能產(chǎn)業(yè)數(shù)字化發(fā)展，助力大模型在企業(yè)級(jí)場景中的使用。

  某互聯(lián)網(wǎng)企業(yè)自研認(rèn)知型通用大模型，并已構(gòu)建起大模型訓(xùn)練框架，把垂直大模型數(shù)據(jù)處理、預(yù)訓(xùn)練、精調(diào)的復(fù)雜過程流水線化、標(biāo)準(zhǔn)化，可支持根據(jù)業(yè)務(wù)場景進(jìn)行定制，幫助企業(yè)提升客戶服務(wù)體驗(yàn)、優(yōu)化業(yè)務(wù)流程、提高生產(chǎn)效率。

- 客戶需求 -

· 高性能：大模型訓(xùn)練過程中需要對(duì)海量的數(shù)據(jù)進(jìn)行復(fù)雜的計(jì)算，需要高性能服務(wù)器的支撐；

· 高帶寬：足夠的帶寬以支撐服務(wù)器之間的數(shù)據(jù)傳輸和通信；

· 穩(wěn)定性：大模型的訓(xùn)練通常需要運(yùn)行數(shù)小時(shí)、數(shù)天甚至數(shù)周，需要服務(wù)器具有穩(wěn)定性與可靠性；

· 易管理：對(duì)服務(wù)器進(jìn)行遠(yuǎn)程操作和維護(hù)。

- 解決方案 -

  針對(duì)客戶需求，安擎部署AI服務(wù)器EG840-G30，支持PCIe4.0技術(shù)，采用先進(jìn)的硬件設(shè)計(jì)，在4U空間內(nèi)支持10張全高全長雙寬的計(jì)算卡，幫助用戶高效完成AI基礎(chǔ)設(shè)施和開發(fā)環(huán)境的構(gòu)建。延續(xù)上一代高品質(zhì)、高兼容性設(shè)計(jì)，實(shí)現(xiàn)更好的顯存和性能擴(kuò)展，大幅加速AI模型訓(xùn)練，滿足用戶對(duì)多樣算力和快捷部署的需求。

·EG840-G30·

- 客戶價(jià)值 -

√ 高性能：服務(wù)器可支持10張計(jì)算卡，運(yùn)行速率比上一代提高20倍，有效地加快訓(xùn)練速度并提高訓(xùn)練的效果；