CN119808860A 混合专家模型的优化方法、装置、设备、介质及程序 （上海燧原科技股份有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119808860A

(43)申请公布日2025.04.11

(21)申请号202510308465.1

(22)申请日2025.03.17

(71)申请人上海燧原科技股份有限公司

地址201306上海市浦东新区中国（上海）

自由贸易试验区临港新片区业盛路

188号A-522室

(72)发明人姚建国吴晨鹏顾琦琪石恒张亚林

(74)专利代理机构北京品源专利代理有限公司11332

专利代理师严慧

(51)Int.Cl.

G06N3/063(2023.01)

G06F17/16(2006.01)

G06N3/0495(2023.01)

权利要求书6页说明书29页附图7页

(54)发明名称

混合专家模型的优化方法、装置、设备、介质

及程序

(57)摘要

CN119808860A本发明实施例公开了一种混合专家模型的优化方法、装置、设备、介质及程序，其中，方法包括：对目标混合专家模型的各项稀疏化的数据结构进行稀疏转换，得到结构化稀疏数据结构；对所述结构化稀疏数据结构进行数据排布优化；结合计算芯片的稀疏计算单元对所述目标混合专家模型的算子进行优化，得到稀疏算子；根据所述稀疏算子对所述目标混合专家模型的原始算子进行更新，得到结构化稀疏的混合专家模型。本发明实施例的