据外媒报道,既不久前英特尔正式发布了新一代AI加速芯片Gaudi 3 之后,其正准备面向中国市场推出“特供版”Gaudi 3,包括名为HL-328的OAM兼容夹层卡(Mezzanine Card)和名为HL-388的PCle加速卡两种硬件形态。
英特尔在其Gaudi 3 白皮书中披露了上述信息,其中HL-328将于6月24日推出,HL-388将于9月24日推出。
据了解,中国特供版的Gaudi 3 与原版相比,具有相同的96MB SRAM片上内存, 128GB HBM2e高带宽内存,带宽为 3.7TB/s,拥有PCIe 5.0 x16 接口和解码标准。但是,由于美国对于AI芯片的出口管制规则限制,使得这类高性能AI的综合运算性能(TPP)需要低于4800才能出口到中国, 这意味中国特供版的Gaudi 3 的16bit性能不能超过150 TFLOPS。
根据英特尔公布的数据显示,Gaudi 3 在 FP16/BF16 上可以达到 1835 TFLOPS,相比英伟达H100在大模型训练方面快40%、推理能效高50%。显然,中国特供版的Gaudi 3 需要大幅降低AI性能,才能合规出口到中国。
据行业分析,中国特供版Gaudi 3 需要大幅削减内核数量(原版拥有 8 个矩阵数学引擎和64 个张量内核)和工作频率,最终可能需要其AI性能降低约92%才能符合美国的出口管制要求。