生成式AI SuperCluster与NVIDIA AI Enterprise、NIM微服务整合,并通过大规模可扩展的计算单元,提供立即性投资报酬率效益和更低的AI运行成本,进而简化AI以利快速部署。
【2024 年 6 月 5 日,加州圣何塞及台北讯】Supermicro, Inc.(NASDAQ:SMCI)作为AI、云端、储存和 5G/边缘领域的全方位IT解决方案制造商,推出可立即部署式液冷型AI数据中心。此数据中心专为云原生解决方案而设计,通过SuperCluster加速各界企业对生成式AI的运用,并针对NVIDIA AI Enterprise软件平台优化,适用于生成式AI的开发与部署。通过Supermicro的4U液冷技术,NVIDIA近期推出的Blackwell GPU能在单一GPU上充分发挥20 PetaFLOPS的AI性能,且与较早的GPU相比,能提供4倍的AI训练性能与30倍的推理性能,并节省额外成本。配合此率先上市的策略,Supermicro近期推出基于NVIDIA Blackwell架构的完善产品系列,支持新型NVIDIA HGXTM B100、B200和GB200 Grace Blackwell Superchip。
Supermicro总裁兼首席执行官梁见后表示:“Supermicro 在打造与部署具有机柜级液冷技术的AI解决方案方面持续领先业界。数据中心的液冷配置设计可几近免费,并通过能持续降低用电量的优势为客户提供额外价值。我们的解决方案针对NVIDIA AI Enterprise软件优化,满足各行各业的客户需求,并提供世界规模级效率的全球制造产能。因此我们得以缩短交付时间,更快提供搭配NVIDIA HGX H100和H200,以及即将推出的B100、B200和GB200解决方案的可立即使用型液冷或气冷计算丛集。从液冷板到CDU乃至冷却塔,我们的机柜级全方位液冷解决方案最大可以降低数据中心40%的持续用电量。”
请造访www.supermicro.com/ai以了解更多信息。
在台北国际计算机展(COMPUTEX 2024)上,Supermicro展示了即将推出,并针对NVIDIA Blackwell GPU优化的系统,包括基于NVIDIA HGX B200的10U气冷系统和4U液冷系统。此外,Supermicro也将提供8U气冷型NVIDIA HGX B100系统、NVIDIA GB200 NVL72机柜(具有72个通过NVIDIA NVLink 交换器互连的GPU)与新型 NVIDIA MGX™系统(支持NVIDIA H200 NVL PCIe GPU与最新发表的NVIDIA GB200 NVL2架构)。
NVIDIA创始人兼首席执行官黄仁勋表示:“生成式AI正在推动整个计算堆栈的重置,新的数据中心将会通过GPU进行计算加速,并针对AI优化。Supermicro设计了顶尖的NVIDIA加速计算和网络解决方案,使价值数兆美元的全球数据中心能够针对AI时代优化。”
随着大型语言模型(Large Language Model,LLM)的快速发展以及Meta的Llama-3和Mistral的Mixtral 8x22B等开源模型不断推出,企业更容易取得并使用当今最先进的AI模型。简化AI基础设施并以最具成本效益的方式提供存取能力,对于支持目前的急速AI变革至关重要。Supermicro云原生AI SuperCluster使实时存取的云端便利性和可移植性之间得以连结,并通过NVIDIA AI Enterprise让任何规模的AI项目从评估测试阶段无缝顺畅地进行到实际作业阶段。这提供了能在任何地方运行并安全管理数据的灵活性,包括自架系统或本地大型数据中心。
随着各界企业急速进行生成式AI的实验性使用,Supermicro与NVIDIA密切合作,确保无缝且灵活地从AI应用的实验和评估试行推动至作业部署和大规模数据中心AI。此顺畅流程是借由NVIDIA AI Enterprise软件平台的机柜、丛集级优化而实现,能使从初步探索至可扩展AI落地的过程更流畅无阻。
托管服务涉及基础架构的选择、数据共享和生成式AI策略控管。NVIDIA NIM微服务作为 NVIDIA AI Enterprise的一部分,可在无缺陷情况下提供托管生成式AI和开源部署优势。其多功能推理运行环境通过微服务,可加速从开源模型到NVIDIA基础模型等各类型生成式AI的部署。此外,NVIDIA NeMoTM可实现通过数据管理、进阶自定义和检索增强生成(Retrieval-Augmented Generation,RAG)的客制模型开发,以实现企业级解决方案。与搭配NVIDIA AI Enterprise的Supermicro SuperCluster整合后,NVIDIA NIM能为可扩展、加速型生成式AI作业的部署提供最快途径。
Supermicro目前的生成式AI SuperCluster产品包括:
●液冷型Supermicro NVIDIA HGX H100/H200 SuperCluster,具有256个H100/H200 GPU,为5个机柜规模的可扩展计算单元(包括 1 个专用网络机柜)
●气冷型Supermicro NVIDIA HGX H100/H200 SuperCluster,具有256个HGX H100/H200 GPU,为9个机柜规模的可扩展计算单元(包括1个专用网络机柜)
●Supermicro NVIDIA MGX GH200 SuperCluster,具有256个GH200 GraceTM Hopper Superchip,为9个机柜规模的可扩展计算单元(包括1个专用网络机柜)
Supermicro的SuperCluster支持NVIDIA AI Enterprise,其中包括NVIDIA NIM微服务和NVIDIA NeMo平台,能实现端对端生成式AI客制,并针对NVIDIA Quantum-2 InfiniBand以及具有每GPU 400Gb/s网速的新型NVIDIA Spectrum-X以太网络平台优化,可扩展到具有数万个GPU的大型计算丛集。
Supermicro即将推出的SuperCluster产品包括:
●Supermicro NVIDIA HGX B200 SuperCluster,液冷型
●Supermicro NVIDIA HGX B100/B200 SuperCluster,气冷型
●Supermicro NVIDIA GB200 NVL72 或 NVL36 SuperCluster,液冷型
Supermicro的SuperCluster解决方案针对LLM训练、深度学习以及大规模与大批量推理优化。Supermicro的L11和L12验证测试及现场部署服务可为客户提供无缝顺畅体验。客户收到即插即用的可扩充单元后即可在数据中心轻松部署,进而更快取得效益。
关于Super Micro Computer, Inc.
Supermicro(纳斯达克股票代码:SMCI)是应用优化全方位IT解决方案的全球领导企业。Supermicro的成立据点及营运中心位于美国加州圣何塞,致力为企业、云端、AI和5G电信/边缘IT基础架构提供领先市场的创新技术。我们是全方位IT解决方案制造商,提供服务器、AI、储存、物联网、交换器系统、软件及支持服务。Supermicro的主板、电源和机壳设计专业技术进一步优化我们的开发与生产,为我们的全球客户实现从云端到边缘的下一代创新。我们的产品皆由企业内部团队设计及制造(在美国、亚洲及荷兰),经由产品设计优化降低总体拥有成本(TCO),并通过绿色计算技术减少环境冲击,在全球化营运下达到极佳的制造规模与效率。屡获殊荣的Server Building Block Solutions®产品组合使客户能从极多元系统产品线内选择合适的机型,进而将工作负载与应用达到最佳性能。多元系统产品线由高度弹性、可重复使用的建构组件打造而成,而这些组件支持各种硬件外形规格、处理器、内存、GPU、储存、网络、功耗和散热解决方案(空调、免费自然气冷或液冷)。
Supermicro、Server Building Block Solutions和We Keep IT Green皆为Super Micro Computer, Inc.的商标和/或注册商标。