主要觀點
Arrcus 正在將其網路架構與 NVIDIA 的完整 AI 堆疊整合,以創建更有效率的人工智慧應用基礎設施。此次合作旨在解決市場日益增長的從集中式 AI 模型訓練向全球分布式推理的轉變,這需要一種新型的智慧低延遲網路。
- 戰略整合: Arrcus 宣布將其 Arrcus 推理網路架構 (AINF) 與 NVIDIA 的 AI 基礎設施進行整合,包括 BlueField-3 DPU 和 Spectrum-X 網路平台。
- 性能目標: 該組合解決方案旨在將端到端延遲降低 40%,將每次推理成本降低 30%,並將首次令牌時間縮短 60%。
- 行業轉變: 該合作夥伴關係針對 AI 推理市場,麥肯錫估計到 2030 年,該市場可能佔所有資料中心工作負載的 40%,這需要網路架構的根本性變革。
