用于在运行时处理数据倾斜的系统和方法.pdfVIP

  • 0
  • 0
  • 约2.35万字
  • 约 23页
  • 2023-05-24 发布于四川
  • 举报

用于在运行时处理数据倾斜的系统和方法.pdf

一种用于处理数据倾斜的系统,包括计算节点和处理器的集群。集群包括一个或多个第一节点和一个或多个第二节点,每个第一节点具有存储装置,每个第二节点具有存储装置。各个第二节点的存储装置具有比各个第一节点的存储装置高的存取速度。处理器被配置为将输入数据拆分为输入数据的分区,检测任何分区是否具有数据倾斜,将检测为不具有数据倾斜的分区分配给第一节点,将检测为具有数据倾斜的分区分配给第二节点,以用于并行处理。

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 111083189 A (43)申请公布日 2020.04.28 (21)申请号 20191

文档评论(0)

1亿VIP精品文档

相关文档