数据集处理方法、装置及计算机可读取存储介质.pdfVIP

  • 4
  • 0
  • 约3.12万字
  • 约 25页
  • 2024-02-24 发布于四川
  • 举报

数据集处理方法、装置及计算机可读取存储介质.pdf

本申请提供一种数据集处理方法、装置及计算机可读取存储介质,涉及数据处理和联邦学习隐私计算技术领域。该方法包括:基于接收接口,获取前端发送的目标数据集;根据每个目标数据集生成对应的标识信息;基于标识信息,将目标数据集进行转换得到的压缩格式的目标数据存储在目标磁盘中;其中,压缩格式包括:Arrow或Parque;基于标识信息,向客户端提供目标磁盘中的目标数据。通过对数据集进行格式转换的方式对数据集进行存储,并结合唯一的标识信息进行数据提取,有效地提高了数据集的加载效率,减小了加载数据集时的内存占用率

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN117591035A

(43)申请公布日2024.02.23

(21)申请号202410070275.6

(22)申请日2024.01.18

(71)申请人天津医康互联科技有限公司

地址

文档评论(0)

1亿VIP精品文档

相关文档