中国信息通信研究院(简称“中国信通院”)宣布正式启动DeepSeek国产化适配测评工作,旨在为DeepSeek系列模型在多硬件多场景下的适配部署提供参考。
一是评价模型在包括硬件芯片、计算设备、智算集群等软硬件系统中的适配效果;二是反映模型在软硬件系统适配过程中软件栈及工具的适配易用性及开发部署成本。
本次测评将依托由中国信通院人工智能软硬件协同创新与适配验证中心(亦庄)、人工智能关键技术和应用评测工业和信息化部重点实验室联合推进的AISHPerf(Performance Benchmarks of Artificial Intelligence Software and Hardware,以下简称AISHPerf)人工智能软硬件基准体系及测试工具,面向包括芯片、服务器、集群、开发框架及工具链、智算设施及平台等在内的人工智能软硬件产品及系统开展。
测试将主要围绕表1所示的DeepSeek不同模态、不同尺寸的系列模型,面向推理、微调、训练过程,低成本使用测试工具AISHPerf,从适配成本、功能完备性、优化效果、性能指标等多方面开展测试评估。
(文/开源中国)