AIPerf：由清华大学与鹏城实验室联合研制的大规模人工智能算力基准测试程序

AI算力基准测试, 高性能计算, 自动化机器学习
AIPerf是由清华大学与鹏城实验室联合研制的大规模人工智能算力基准测试程序，旨在科学评估计算集群的AI性能。

AIPerf是什么

AIPerf是一种基于自动学习的可变规模人工智能基准评测程序，由清华大学与鹏城实验室联合研制。它专为评估大规模人工智能计算系统而设计，解决了传统基准测试程序（如Linpack）与AI计算需求不匹配的问题。AIPerf以自动化机器学习（AutoML） 为核心负载，通过网络结构搜索和超参优化来全面测试计算集群的AI算力。

AIPerf的主要功能

1. 自动化算力评估：基于微软NNI开源框架实现，使用网络态射和TPE方法进行网络结构搜索和超参优化，自动寻找更优的神经网络结构和参数

2. 可变规模测试：可根据集群规模动态调整问题大小，充分利用不同规模计算集群的资源

3. 统一性能指标：采用Tops作为评价指标，即平均每秒处理的混合精度AI浮点操作数，方便不同系统横向比较

4. 多机通信测试：包含必要的多机通信环节，如任务分发、结果收集与多机训练，将网络性能纳入评估体系

5. 实际AI应用负载：目前在ImageNet数据集上训练神经网络运行计算机视觉应用，未来计划支持自然语言处理等更多AI任务

AIPerf如何收费

AIPerf作为学术研究项目，目前没有明确的商业化定价信息。该项目处于积极的开发和完善阶段。

AIPerf的应用场景

1. 超算中心排名评估：用于中国超级算力大会等场合的大规模AI算力排名，如鹏城云脑二主机曾以194,527 Tops的成绩荣登榜首

2. 企业集群选型：帮助企业评估不同AI计算集群的性能，为采购决策提供依据

3. 科研机构研究：支持学术研究机构进行AI系统性能比较和架构优化研究

4. 系统性能优化：协助系统管理员发现计算集群性能瓶颈，进行针对性优化

常见问题

AIPerf目前仍处于积极开发阶段，主要面向大规模AI计算系统评测。如需了解最新功能和支持的集群类型，建议关注清华大学与鹏城实验室的官方发布。

如有更多关于AIPerf的疑问，请评论区留言；

如有优秀AI工具，欢迎 【投稿推荐】
欢迎收藏 【AI导航5】 或 关注公众号 【T老五】，获取更多AI优秀实用工具。