高性能计算云平台并行数据传输方法、系统及介质.pdfVIP

  • 3
  • 0
  • 约1.44万字
  • 约 14页
  • 2023-05-17 发布于四川
  • 举报

高性能计算云平台并行数据传输方法、系统及介质.pdf

本发明公开了一种高性能计算云平台并行数据传输方法、系统及介质,首先将待传输的文件进行encoding编码,根据预先设置的BlockSize参数生成多个固定大小的数据块,再将数据块进行分片及队列化,形成并行传输队列,对每个队列项的数据做压缩、加密处理,然后使用多传输通道并行上传多个队列的数据,在接收侧并行接收传输队列的数据,并进行解密及解压缩,得到原始数据块,最后根据数据块中的header信息直接写入文件内容。本发明解决了传输串行低效的问题,提高海量小文件在传输中串行的传输效率;在传输

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 114827125 A (43)申请公布日 2022.07.29 (21)申请号 202210293820.9 (22)申请日 2022.03.23 (71)申请人 深圳北鲲云计算有限公司 地址 51

文档评论(0)

1亿VIP精品文档

相关文档