一体化数据管理技术平台.pptVIP

技术难点和重点：IO 日志保存-分级目录虚表（续3） 日志卷 Am9:37:21 Am10:23:34 Am11:20:03 pm12 1 4 7 10 2 5 8 11 3 6 9 12 10:00-10:59 1 4 7 10 2 5 8 11 3 6 9 12 11:00-11:59 1 4 7 10 2 5 8 11 3 6 9 12 9:00-9:59 1 4 7 10 2 5 8 11 3 6 9 12 2 6 7 9 10 1 12 2 6 7 9 10 1 12 2 6 7 2 6 7 9 10 技术难点和重点：IO 日志保存-Timemark 原始卷 1 4 7 10 2 5 8 11 3 6 9 12 老的数据块从 日志区中 查找，根据分级目录虚表和TimeMark，数据块能够被一对一的找到，而且根据需要能够建立静态的索引表指向日志卷内固定块地址，从而提高挂载访问速度 Timemark 技术难点和重点：IO 日志保存-快照可写 使用分级目录虚表，我们可以建立若干多快照，每个快照并不需要和原始卷或者被保护磁盘同样的大小。如果是只读快照，我们只要建立原始卷的分级目录虚表，把原始卷的数据块号一对一的映射到日志卷内块号即可，然后建立静态索引信息，加快块号的访问速度。 对于可写快照，我们要使用写时拷贝技术并且给他分配独立的日志卷。 最后，我们使用分级目录虚表使用少量的存储空间，通过共享只读数据块来虚拟逻辑卷，方便应用层使用操作系统支持的文件格式来Mount 虚拟逻辑卷。 技术难点和重点：虚拟逻辑卷 如图所示，为了虚拟原始卷，拦截所有的块号请求，然后重定向，通过某个时间点，从日志卷查找，如果通过四级目录查找的过程得到空地址（块号），那么这一块就从原始卷里读，如果非空，它肯定指向日志卷上的某个有效块。这样就虚拟出来整个被保护的磁盘某时刻的快照 技术难点和重点：异步远程复制 需要将镜像卷和日志卷都远程复制 1 4 7 10 2 5 8 11 3 6 9 12 1 4 7 10 2 5 8 11 3 6 9 12 2 6 7 CDP Server 远程 CDP Server 源卷 采用客户端与CDP Server类似的异步同步机制，使用位图来表示当前变化的块是否已经发送到远程 元数据 IO数据 日志卷 元数据 IO数据 根据时间顺序，逐渐拷贝元数据和IO数据 技术难点和重点：普通网卡引导 基于gPXE、微软Initiato、 Sanbootconf(开源软件，为SANBOOT提供配置信息) 在CDP Server 根据快照设置Target (采用SCST实现) 并且在CDP Server 设置DHCP 、同时在客户端采用Pxe引导 主要功能模块总结 模块 重要性 实现方式 磁盘IO截获 高 完成自主研发 同步和异步数据镜像技术 高 完成自主研发 重新同步设计 高 完成自主研发 IO日志卷数据保存 高 完成自主研发 日志内存组织查询方案 高 完成自主研发 TimeMark实现 高 完成自主研发 可写快照设计 高 完成自主研发 普通网卡引导 高 gpxe + initiator +自主研发 异步远程复制 高 完成自主研发 虚拟卷技术 高 完成自主研发 内容 一体化数据管理技术平台 LiveDPM产品开发需求 主要竞争 CDP 对比 LiveDPM项目技术方案 LiveDPM项目主要模块及技术难点 LiveDPM项目开发计划 LiveDPM Roadmap 项目团队建设 角色 知识技能要求 建议人选、人数 工时估计 项目负责人 协调内外部资源、控制项目开发进度 刘正伟 12 Mouths Linux/Solaris软件工程师 具有良好的Linux软件开发能力和类似项目开发经验 4人（缺三个人） 12 Mouths Windows软件工程师 具有良好的Windows软件开发能力和类似项目开发经验 3人 12Mouths Web 软件开发工程师 具有良好的Web软件开发能力和类似项目开发经验 1人 12Mouths UI 美工 良好的Web/GUI设计能力 刘立中 3 Mouths 测试工程师 熟悉存储产品，了解测试流程和方法，精通各种测试工具 软件测试工程师 1人 存储测试工程师 1人 7 Mouths 产品工程化 熟悉公司产品化流程，较强的产品技术文档书写能力 产品处工程师 1人 1 Mouths 配置管理员 熟悉软件配置管理流程，熟练使用配置管理工具 软件研发部配置管理员 1人 10 Mouths 项目里程碑计划 时间 阶段 任务 输出 2009/11 (3周) 项目启动 项目可行性报告 项目立项报告 《CDP产品测试报告》 《CDP技术调研报告》 2009/12 (3周) 需求分析 需求分析说明书、项目计划文档、总体