大数据时代的地震勘探软件平台解析.pptVIP

32 π-Frame平台技术特色 特色1：规模大 海量地震数据管理支撑：100+PB 大规模并行计算资源支撑：1000+节点（数万~数十万核） 大规模用户、项目、作业支撑：4000+ 单作业处理数据规模大：18TB数据的分选作业 大规模功能扩充支撑 33 π-Frame平台技术特色 特色2：速度快 ■基于分布式文件系统的并行I/O带来的高吞吐能力 68个节点、每个节点4块硬盘的测试系统配置，测试获得了 35GB/s即约2TB/m的I/O性能，约3~5GB/s即200+GB/m的地震 数据加载性能、常规地震批处理作业吞吐性能。 ■全并行化批处理机制带来的大规模并行计算线性扩展能力 融合并行数据I/O和并行计算、数据划分与数据备份、计算任务 容错等特性 支持作业并行、节点并行、Map级数据并行、多线程并行、GPU 异构并行等多级并行模式 34 π-Frame平台技术特色 特色2：速度快 高性能的海量地震数据存取访问 ~1500GB/min 200.93 GB/m 8.1TB 41m17s 并发导入 86个map 472节点 S1JX3.1TB YBD 2TB JSB 3TB （86个文件） 101.7 GB/m 3.1TB 31m12s 一次导入 40个map 472节点 S1JX3.1TB （40个文件） 65.67 GB/m 3.1TB 48m20s