RDMA 在分布式存储中的应用.pdfVIP

基于 RDMA 的高性能分布式文件存储 BUILD THE BEST HIGH PERFORMANCE STORAGE! 公司简 介 产品 技术 团队 为HPC/AI 等领 存储领域多项核 域提供专业存储 心技术 产品和解决方 核心团队来自于 美国专业存储公 司  2016 年：推出基于TCP/IP 网络的分布式存储系统  2017 年：面向HPC 和AI 行业，基于RDMA 技术全力研发新一代存储产 品  2019 年：在IPFS/Filecoin 网络中测试RDMA 网络 储迅已交付超过500PB 的企业生产数据存储系统！ 传统分布式文件存储  前端网络：以太网为主  后端网络：以太网为主 前端以太网交换机  问题 ：网络 成为瓶颈  带宽不足：HPC 行业需要更高的带宽  延时高：无法满足AI 行业的需求 后端以太网交换机 网络瓶颈解析： TCP/IP 协 议  优点：容错、兼容性  缺点：层次复杂、性能天生缺陷  每一层都有特定的header  大量的数据拷贝操作  带宽低、延时高  存储网络不同于长距离的公网传输  网络问题是提高存储性能的关键问题 解决问题的关键： RDMA  RDMA ：Remote Direct Memory Access  减少复杂的协议栈层次  避免多次数据拷贝  用户态程序直接读取内核的数据  带宽高