1. 您所在位置：
  2. 网站首页
  3. 文档分类
  4. 行业资料
  5. 国内专利

一种基于数据处理单元读取列式存储文件的加速方法及装置.pdfVIP

  • 2
  • 0
  • 约1.33万字
  • 约 12页
  • 2024-02-21 发布于四川
  • 举报

一种基于数据处理单元读取列式存储文件的加速方法及装置.pdf

    本发明提供一种基于数据处理单元读取列式存储文件的加速方法及装置，包括：基于Spark层读取列式存储文件的文件信息，并将文件信息传递至数据处理平台层；数据处理平台层根据文件信息读取相应的列式存储文件；基于数据处理单元板卡并行读取列式存储文件，并进行计算，将计算结果发送至数据处理平台层；数据处理平台层将列式存储文件的计算结果进行行列转换处理，并将处理后的计算结果进行输出与展示。本发明提供的加速方法对于列式存储文件的读取，由数据处理单元直接并行读取并计算，避免数据的大量拷贝，提升整体方案性能，同时减少

    (19)国家知识产权局

    (12)发明专利申请

    (10)申请公布号CN117573699A

    (43)申请公布日2024.02.20

    (21)申请号202311422165.3

    (22)申请日2023.10.30

    (71)申请人中科驭数（北京）科技有限公司

    地址

    您可能关注的文档

    最近下载

    文档评论（0）

    1亿VIP精品文档

    更多 >

    相关文档

    更多 >