浪潮信息宣布旗下NF5468系列AI服務(wù)器率先支持英偉達最新推出的L40S GPU,可為人工智能大模型訓(xùn)練和推理、元宇宙及圖形視頻處理等應(yīng)用提供強大算力。實際測試表明,搭載8顆NVIDIA L40S的浪潮信息NF5468服務(wù)器大幅提升了LLaMA大模型的微調(diào)訓(xùn)練性能。目前該產(chǎn)品已具備交付能力,客戶可以進行下單采購。
本次浪潮信息推出的算力系統(tǒng)是兼具訓(xùn)練和推理能力的NF5468系列AI服務(wù)器,包括NF5468M6、NF5468A5、NF5468M7、NF5468A7等型號,產(chǎn)品可以在4U空間內(nèi)搭載2顆高性能通用處理器、8張L40S GPU加速器及多顆高速互聯(lián)網(wǎng)絡(luò),從而滿足大模型計算對高算力、高互聯(lián)的極致性能需求。在軟件上,產(chǎn)品支持浪潮信息最新推出的OGAI大模型智算軟件棧,為客戶提供高效的大模型生產(chǎn)力支撐。
針對業(yè)界廣泛使用的LLaMA開源大型語言模型,浪潮信息NF5468服務(wù)器搭載8顆L40S GPU進行了大模型訓(xùn)練性能測試,得益于浪潮信息在NF5468服務(wù)器的優(yōu)秀設(shè)計和大模型算法上的專業(yè)經(jīng)驗,L40S GPU的強大性能得以充分發(fā)揮,實際測試數(shù)據(jù)表明LLaMA大模型微調(diào)訓(xùn)練性能優(yōu)異。
浪潮信息NF5468系列AI服務(wù)器搭載L40S GPU可以很好地完成LLaMA大模型訓(xùn)練任務(wù),并具備良好的性能擴展,將幫助客戶迅速部署高性能的AI算力系統(tǒng)、采納強大的GPU加速器和領(lǐng)先的軟件生態(tài),加速生成式AI的產(chǎn)業(yè)創(chuàng)新和發(fā)展。
審核編輯:彭菁
-
gpu
+關(guān)注
關(guān)注
28文章
4923瀏覽量
130859 -
浪潮
+關(guān)注
關(guān)注
1文章
475瀏覽量
24588 -
人工智能
+關(guān)注
關(guān)注
1805文章
48863瀏覽量
247659 -
英偉達
+關(guān)注
關(guān)注
22文章
3929瀏覽量
93309 -
AI服務(wù)器
+關(guān)注
關(guān)注
2文章
133瀏覽量
5166
原文標題:浪潮信息AI服務(wù)器率先支持L40S, 首發(fā)LLaMA訓(xùn)練優(yōu)異性能
文章出處:【微信號:浪潮AIHPC,微信公眾號:浪潮AIHPC】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
浪潮軟件率先推出政務(wù)服務(wù)大模型,重塑全場景應(yīng)用

浪潮信息發(fā)布元腦R1推理服務(wù)器
浪潮信息升級數(shù)據(jù)中心服務(wù)器故障智能診斷AIOps技術(shù)
英偉達GB300 AI服務(wù)器訂單配置初定
英偉達CEO確認:液冷Grace Blackwell服務(wù)器無過熱問題
中國邊緣服務(wù)器市場持續(xù)兩位數(shù)增長,浪潮信息蟬聯(lián)第一

浪潮信息發(fā)布KOS AI定制版,大幅提升大模型訓(xùn)練效率
浪潮信息AI存儲性能測試的領(lǐng)先之道

英偉達地表最強AI芯片GB200 NVL72服務(wù)器遭搶購
微軟Azure首獲英偉達GB200 AI服務(wù)器
英偉達AI服務(wù)器將革新采用插槽式設(shè)計
讓服務(wù)器開機遠離飛機起飛!浪潮信息首創(chuàng)3秒智能控溫技術(shù),降噪30.4%

評論