返回上一页  首页 | cnbeta报时: 08:30:12
富士通新技术可优化人工智能和高性能计算工作负载的CPU和GPU分配
发布日期:2023-11-16 00:16:27  稿源:cnBeta.COM

富士通是一家日本跨国企业集团,主要销售个人和企业计算产品以及 x86 和大型服务器。该公司在高性能计算(HPC)领域也很活跃,当然也像地球上其他科技公司一样,对利用最新的人工智能热潮很感兴趣。

2023-11-15-image-6-j_1100.webp

富士通开发了两项新技术,旨在优化强大的高性能计算系统上的 CPU 和 GPU 工作负载。该公司正致力于实时分配资源,以更好地管理具有高执行效率的进程,同时优化多个程序的并行处理。富士通表示,新解决方案旨在解决生成学习和其他人工智能相关技术的爆炸性需求所导致的全球GPU短缺问题。

这些优化技术包括一个"自适应GPU分配器"(Adaptive GPU Allocator),它似乎可以检测出程序是需要在GPU加速器上执行还是在CPU上执行。分配器是作为一个独立的服务器实现的,旨在测量代码执行性能。

如果程序希望在 HPC 系统中使用 GPU,分配器服务器就会批准访问,同时检查 GPU 和 CPU 上迷你批处理作业的处理时间。如果 GPU 批次测试不能充分缩短处理时间,分配器就会继续在 CPU 上重新分配作业。不幸的是,程序需要专门编写,以便通过专用框架使用新的分配器服务器,富士通公司证实了这一点。

另一种优化高性能计算工作负载的解决方案是交互式高性能计算(Interactive HPC),富士通将其描述为世界上第一种"在高性能计算系统上实时切换多个程序执行"的技术。富士通解释说,传统的控制方法采用单播通信,将程序执行"逐个"切换到每台服务器上。

交互式 HPC 采用广播通信方法,向 HPC 系统中的每个计算节点发送切换指令。富士通表示,在256节点的高性能计算环境中工作时,新方法似乎足以将进程切换时间从几秒缩短到100毫秒。

富士通对新GPU分配技术的计划主要集中在AI平台"Kozuchi"上,该公司的人工智能平台旨在为客户提供测试"先进人工智能技术"的快速方法。这项 HPC 优化技术还将应用于富士通的 40 量子位量子计算机模拟器。在计算即服务的高性能计算环境中的进一步应用似乎也在考虑之中。

查看网友评论   返回完整版观看

返回上一页  首页 | cnbeta报时: 08:30:12

文字版  标准版  电脑端

© 2003-2024