用户态本地存储引擎.PDFVIP

用户态本地存储引擎 — 百万IOPS背后的故事 刘攀 基础设施事业群存储技术专家 2018/3月 提纲  FusionEngine项目背景  USSOS介绍  USSFS介绍  工具支持 后续计划 项目背景 — 问题的提出 • NVME SSD带来的挑战 • 以NVMe SSD为代表的新硬件介质的发展推动了存储软件栈的变革。 网络和处理器逐渐成为严重的性能瓶颈点。 • 旧的存储软件栈的设计围绕磁盘的特性，设计NVME SSD存储软件栈时需要 采用不同的技术手段。 • 传统内核栈的问题 • 线上运维对于云存储而言非常重要。 • 传统分布式存储往往架构在Ext4之类的本地文件系统之上 • 定位问题难度大。内核软件栈中问题的定位是一个非常困难和漫长的过程。 • 解决问题风险大。在实际应用中，即使root cause的问题都有可能不会去修复。 项目背景 — 2018年1月9 日，上线ESSD公有云项目 USSOS: User Space Storage Operating System  Bypass kernel提升处 Distribute Storage Application 理器效率 User Space File system  简化存储软件栈提升 后台 QoS / Openchannel 进程 FTL IO性能 Driver User Space User Space Storage Software Platform (USSOS)  建立统一的用户态设 File system Device Kernel 备管理体系 (Ext4) / Block service system  切合高性能存储介质 Manag Driver er 的发展趋势 Kernel Storage Software Stack  全用户态软件栈，简 OpenChannel NVMe SSD NVDIMM RoCE RDMA NIC 化运维 SSD 与原生SPDK的关系 存储软件平台 Memory