一种基于Partition结构的编码分布式计算方法.pdfVIP

  • 8
  • 0
  • 约3.16万字
  • 约 21页
  • 2023-06-06 发布于四川
  • 举报

一种基于Partition结构的编码分布式计算方法.pdf

本发明公开了一种基于Partition结构的编码分布式计算方法,在编码分布式计算中,对于N个输入文件,使用K个分布式计算节点来计算Q个输出函数的值,整个计算过程分三个阶段进行:Map阶段、Shuffle阶段和Reduce阶段,以K个节点共同计算Q个函数s次的分布式计算的方法,包括如下步骤:A.Map阶段;B.Shuffle阶段;C.Reduce阶段。这种方法所实现的通信负载几乎约等于最优通信负载,并且在此基础上,所需的输入文件个数N及输出函数个数Q的最小要求相比Ali的方案明显减少。

(19)中华人民共和国国家知识产权局 (12)发明专利 (10)授权公告号 CN 112769522 B (45)授权公告日 2022.04.19 (21)申请号 202110072010.6 (56)对比文件 (22)申请日 2021.01.20

文档评论(0)

1亿VIP精品文档

相关文档