NVIDIA英偉達(dá)H20人工智能服務(wù)器專為 AI 和 HPC 而打造。
AI、復(fù)雜模擬和海量數(shù)據(jù)集需要多個(gè)具有極快互連速度的 GPU 和加速的軟件堆棧。NVIDIA HGX™ AI 超級(jí)計(jì)算平臺(tái)整合了 NVIDIA GPU、 NVLink®、NVIDIA 網(wǎng)絡(luò)以及全面優(yōu)化的 AI 和高性能計(jì)算 (HPC) 軟件堆棧的全部功能,可提供*高的應(yīng)用性能并加快獲得見解的速度。
NVIDIA英偉達(dá)H20人工智能服務(wù)器GPU算力租賃配置參數(shù):
框架 | 6U 機(jī)架式服務(wù)器 |
處理器 | 2 顆至強(qiáng) Platinum 8480 (可擴(kuò)展AMD第四代EYPC處理器) |
內(nèi)存 | DDR5 4800 64G內(nèi)存*32 |
GPU | NVIDIA HGX H20 GPU 模組 |
系統(tǒng)硬盤 | 960G SATA SSD *2 |
數(shù)據(jù)硬盤 | 3.84T NVme U.2 SSD*4 9560 8i raid卡*1 |
PICE 插槽 | 支持12個(gè)PCIe 5.0插槽; 支持Bluefield-3、CX7以及多種類型智能網(wǎng)卡; |
端到端加速計(jì)算平臺(tái)
NVIDIA HGX H20將 NVIDIA Blackwell Tensor Core GPU 與高速互連技術(shù)相集成,推動(dòng)數(shù)據(jù)中心邁向加速計(jì)算和生成式 AI 的新時(shí)代。HGX 系統(tǒng)是加速縱向擴(kuò)展平臺(tái),專為要求嚴(yán)苛的生成式 AI、數(shù)據(jù)分析和 HPC 工作負(fù)載而設(shè)計(jì)。
NVIDIA HGX H20 將 H20 Tensor Core GPU 與高速互連技術(shù)相結(jié)合,為每個(gè)數(shù)據(jù)中心提供出色的性能、可擴(kuò)展性和安全性。它配置了多達(dá) 8 個(gè) GPU,為 AI 和 HPC 領(lǐng)域打造出性能強(qiáng)勁的加速垂直擴(kuò)展式服務(wù)器平臺(tái)。HGX H20提供高級(jí)網(wǎng)絡(luò)選項(xiàng),憑借 NVIDIA Quantum-2 InfiniBand 和 Spectrum™-X 以太網(wǎng)實(shí)現(xiàn)出色的 AI 性能
HGX H20還集成了 NVIDIA數(shù)據(jù)處理器 (DPU),有助于在超大規(guī)模 AI 云中實(shí)現(xiàn)云網(wǎng)絡(luò)、可組合存儲(chǔ)、零信任安全性和 GPU 計(jì)算彈性。
深度學(xué)習(xí)推理:性能和多功能性,適用于新一代大型語言模型的實(shí)時(shí)推理。
深度學(xué)習(xí)訓(xùn)練:性能和可擴(kuò)展性;
訓(xùn)練性能進(jìn)一步提升第二代 Transformer 引擎采用 8 位浮點(diǎn) (FP8) 和新精度,可使 GPT-MoE-1.8T 等大型語言模型的訓(xùn)練速度顯著提升 3 倍。這一代 NVLink 可提供GPU 間直接互連、InfiniBand 網(wǎng)絡(luò)和 NVIDIA Magnum IO™ 軟件。這些因素將共同確保企業(yè)和廣泛的 GPU 計(jì)算集群具備高效的可擴(kuò)展性。
NVIDIA英偉達(dá)H20人工智能服務(wù)器借助 NVIDIA 網(wǎng)絡(luò)來加速 HGX;
數(shù)據(jù)中心是新的計(jì)算單元,而網(wǎng)絡(luò)在大幅提升整個(gè)數(shù)據(jù)中心的應(yīng)用性能方面發(fā)揮著**的作用。與 NVIDIA Quantum InfiniBand 搭配使用時(shí),HGX 可提供性能和效率,確保計(jì)算資源得到充分利用。
相關(guān)產(chǎn)品
免責(zé)聲明
- 凡本網(wǎng)注明“來源:化工儀器網(wǎng)”的所有作品,均為浙江興旺寶明通網(wǎng)絡(luò)有限公司-化工儀器網(wǎng)合法擁有版權(quán)或有權(quán)使用的作品,未經(jīng)本網(wǎng)授權(quán)不得轉(zhuǎn)載、摘編或利用其它方式使用上述作品。已經(jīng)本網(wǎng)授權(quán)使用作品的,應(yīng)在授權(quán)范圍內(nèi)使用,并注明“來源:化工儀器網(wǎng)”。違反上述聲明者,本網(wǎng)將追究其相關(guān)法律責(zé)任。
- 本網(wǎng)轉(zhuǎn)載并注明自其他來源(非化工儀器網(wǎng))的作品,目的在于傳遞更多信息,并不代表本網(wǎng)贊同其觀點(diǎn)和對(duì)其真實(shí)性負(fù)責(zé),不承擔(dān)此類作品侵權(quán)行為的直接責(zé)任及連帶責(zé)任。其他媒體、網(wǎng)站或個(gè)人從本網(wǎng)轉(zhuǎn)載時(shí),必須保留本網(wǎng)注明的作品第一來源,并自負(fù)版權(quán)等法律責(zé)任。
- 如涉及作品內(nèi)容、版權(quán)等問題,請(qǐng)?jiān)谧髌钒l(fā)表之日起一周內(nèi)與本網(wǎng)聯(lián)系,否則視為放棄相關(guān)權(quán)利。