一种适用于机器学习的高性能混合分布式架构实现方法.pdfVIP

  • 7
  • 0
  • 约1.63万字
  • 约 13页
  • 2024-03-09 发布于四川
  • 举报

一种适用于机器学习的高性能混合分布式架构实现方法.pdf

本发明公开了一种适用于机器学习的高性能混合分布式架构实现方法,属于机器学习技术领域,该方法的实现包括以下模块:混合分布式训练架构,用于构建数据并行和模型并行混合的机器学习通用分布式训练框架;通用模型分割算法,用于将一个复杂的机器学习模型从特征层面划分为多个相互独立的机器学习子模型;模型剪枝策略,用于将训练过程中性能表现欠佳的子模型剪枝,并将空闲计算资源分配给其他活跃子模型组以进一步提升框架效率和最终模型性能。本发明使得分布式机器学习系统训练效率和模型准确性可以有效提高。

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN117669768A

(43)申请公布日2024.03.08

(21)申请号202311558475.8

(22)申请日2023.11.21

(71)申请人山东浪潮数据库技术有限公司

地址

文档评论(0)

1亿VIP精品文档

相关文档