DDN存储-日本电气NEC 选择DDN 数据解决方案加速人工智能研究

发布时间:

2022-05-31 00:00

 

  数据已成为应对各种商业机会的战略工具

  为了增强 AI 研发竞争力,日本电气 NEC 选择 DDN 存储解决方案,来打造日本企业中大规模AI 研究超级计算机。该新型超级计算机已经投入生产运行,预计 2023 年 3 月达到计划的计算能力。

  

 

  这台 AI 超级计算机的峰值计算性能将达 580 Pflop/s ,将为 NEC 的数据科学家提供以 AI 为中心的大规模开发环境,协助先进 AI 的快速发展。

  

 

  NEC 打造的 AI 研究超级计算机依赖于 DDN EXAScaler® 并行文件系统,该文件系统用于全球 HPC 环境已超过 20 年,近年来也支持新兴的大规模 AI 用例。

  本次采用的 DDN 存储环境由多台DDN ES400NVX EXAScaler 设备组成,实现了16PB的总容量、400GB/s的读取性能和320GB/s的写入性能,以及约 2400 万 IOPS。

  内置并行文件系统的DDN EXAScaler 设备不仅为各种工作负载提供高性能存储,而且提供安全和管理功能,这些功能对企业的 AI 工作负载至关重要。DDN 存储提供的标准功能包括GPUDirect Storage、通过Kubernetes访问存储所需的CSI驱动、多租户功能。当 DDN 存储用于先进的深度学习环境时,这些标准功能既确保了安全简化的管理又不影响性能。

  这台 AI 研究超级计算机的计算部分配置了NVIDIA A100 80GB Tensor Core GPU,网络部分配置了NVIDIA Spectrum SN3700交换机,它们与 DDN 存储解决方案集成在一起。

  在 AI 中,数据预处理阶段,即从数据摄取到数据传输再到训练,是存储环境的关键阶段。DDN 的数据存储解决方案将全力支持这台 AI 研究超级计算机,实现 NEC “ AI 研发加速社会数字化转型”的目标。

  “NEC 拥有各种先进的 AI 技术,如图像/视频识别、数据分析和控制技术,包括具备先进水平的生物特征认证技术。”NEC 公司数字技术开发实验室AI 平台高级架构师北野貴稔先生说:“经过一年的技术验证和试运行,我们决定采用 DDN 的高性能存储,不仅因为它可以处理各种各样的 I/O 工作负载 ,还因为 DDN 日本出色的技术开发和售后支持能力。我们期待两家公司在 AI 超级计算机的开发上进行合作,在未来共同创造先进的社会价值。”

相关新闻