pie集群并行处理系统介绍.pptx

PIE集群并行处理平台介绍北京航天宏图信息技术有限责任公司2024年8月22日

产品简介产品功能应用案例汇报内容

产品简介汇报内容

产品简介PIE集群并行处理平台PIE集群并行处理平台构建在网格计算环境下的，面向海量影像自动化生产研发的一整套软硬件产品技术解决方案，该产品将高性能的计算能力和PIE专业的遥感图像处理功能相结合，使数据处理的速度和效率都得到了显著提高。通过定制自动化的工作流，能够大大提升传统的影像处理能力，从而提高企业的处理实力。

产品特色系统采用分层结构，层间耦合度低基于SOA架构，可集成多种开发语言开发的算法模块提供简便、易用的流程设计工具支持处理流程和计算节点的动态监控支持跨平台可伸缩的软硬件系统架构，满足不同生产规模需求

逻辑架构结合用户的需求和已有的软硬件资源，为用户提供全套的集群调度并行处理解决方案，可实现底层数据并行、任务并行、算法并行。产品架构

产品架构物理架构

关键技术CPU+GPU协同数据处理CPU和GPU协同计算，充分利用GPU强大的硬件图形处理能力和多核CPU的计算资源PIE集群并行处理平台结合CUDATM、OPENCL以及OPENMP等多种并行计算技术

任务流编排可视化的流程编排关键技术提供面向用户的流程编排工具，通过简单的拖拽以及在服务赋值界面进行参数配置等基本操作即可实现对流程的可视化编排，用户体验良好，使用简单，极大地提高了流程开发的质量和效率。

关键技术采用队列机制存储调度任务，确保调用任务时能够遵循先进先出的原则；同时支持任务的优先级设置，优先级较高的任务会被优先执行。任务调度时，可采用两种策略选择计算节点：平均分配：每台计算节点能执行的最大任务数固定，分配任务时，根据该节点当前运行任务数进行分配；机器硬件优劣分配：每台计算节点能执行的最大任务数由节点的CPU数量决定，CPU越多，该节点能同时并行执行的任务就越多。分配任务时，根据该节点的CPU数量和当前运行任务数进行分配。任务调度任务调度

关键技术图形化的任务监控可以对任务运行状态和各个计算节点的状态进行实时监控，包括CPU、内存使用情况，I/O情况等。

关键技术-基于SOA架构的服务集成基于SOA架构的服务集成基于SOA思想设计，将遥感图像处理算法及业务流程采用标准化、规范化的方式进行封装，一键部署，部署注册一步到位

产品功能汇报内容

支持国内和国外常用光学遥感数据的预处理全流程遥感基础产品生产图像镶嵌·色彩归一化融合·SFIM融合·PCA融合·Pansharp融合·图像匹配·正射校正·几何精校正·辐射定标·大气校正图像融合几何校正辐射校正产品功能-高效高精度图像预处理

支持GF-1、GF-2、ZY-3、TH01，HJ1A/1B等国产卫星传感器传感器类型可快速扩展简单易用的大气校正功能产品功能-高效高精度图像预处理根据卫星名称及元数据文件自动读取辅助信息1操作简单基于大气辐射传输模式，内置气溶胶光学厚度反演方法2处理精度高事先生成针对不同卫星数据大气校正的查找表3校正速度快

大气校正前大气校正后大气校正前后水体波谱曲线变化（左：前；右：后）大气校正前后植被波谱曲线变化（左：前；右：后）简单易用的大气校正功能产品功能-高效高精度图像预处理

高效高精度的控制点自动匹配1可实现基于多影像、多服务为基准的控制点自动匹配2可实现不同源、不同时相、不同尺度、有旋转扭曲等困难条件下的影像间自动匹配3采用多种粗差剔除方法，可完全、自动剔除误差点产品功能-高效高精度图像预处理

流程化、自动化正射校正支持GF-1、GF-2、ZY1-02C、ZY-3、TH01，QuickBird等卫星传感器传感器类型可快速扩展只用RPC系数校正结果RPC系数+控制点+DEM校正结果产品功能-高效高精度图像预处理

产品功能-高效高精度图像预处理丰富的图像融合功能CPU+GPU协同处理保持多光谱图像的辐射信息同时增强空间分辨率运算速度快，占用非常少的虚拟内存空间PIE速度快效果好CPU+GPU协同处理Pansharp融合

产品功能-高效高精度图像预处理丰富的图像融合功能Pansharp融合利用最小方差技术对参与融合的波段值进行最佳匹配,减少融合后的颜色偏差融合前融合后

产品功能-高效高精度图像预处理高效的图像镶嵌功能支持大数据拼接，无数据量限制3智能计算羽化缓冲区，过渡自然2先进的接缝线寻址策略，自动寻找最优镶嵌线1提供高性能、高效的镶嵌能力充分使用系统资源，利用并行计算能力，提升镶嵌速度

产品功能-高效高精度图像预处理测试案例测试数据：GF1PMS数据（全色+多光谱）

产品功能-高效高精度图像预处理测试案例硬件名称详细配置服务器品牌型号：