数据密集型计算的遥感图像预处理方法.pdf

计 算 机 系 统 应 用 http：／w／ww．c-S-a．org．cn 2017年 第 26卷 第 4期 数据密集型计算的遥感图像预处理方法① 周 兵 ，刘晓楠 ，一，臧文乾 ，陈 恒 ， (河南大学 计算机与信息工程学院，开封 475001) (中国科学院遥感与数字地球研究所，北京 100101) 摘 要：针对大数据时代，数据密集型计算已经成为国内外的一个研究热点．遥感数据具有多源化、海量化特点， 是名副其实的大数据．研究适用于遥感影像 自动化、业务化处理的数据密集型计算方法。是 目前遥感应用技术面 临的挑战所面临的挑战，本文提出了一种基于数据密集型计算的遥感图像处理方法．在文中，首先围绕遥感数据 自动化、业务化预处理等问题，深入调查和分析了国内外研究现状，进而介绍了系统体系结构，通过工作流灵活 组织多种算法模型协同工作，设计以“5并行 1加速”的计算体系解决数据密集型的遥感图像预处理，并通过产品 生产实例对其性能进行测试．结果表明，该系统在保证处理精度的前提下，大大提高了遥感大数据预处理的效 率． 关键词：遥感数据；遥感预处理；数据密集型计算；并行计算；5并行 1加速；工作流 RemoteSensingImagePreprocessingMethodBasedontheDataIntensiveComputing ZHOUBing，LIUXiao—Nan’。，ZANGWen．Qian，CHENHeng， (‘SchoolofComputerandInformationEngineering，HenanUniversity,Kaifeng475001，China) (InstituteofRemoteSensingandDigitalEarth，ChineseAcademyofSciences，Beijing100101，China) Abstract：Intheeraofbigdata，theresearchondata-intensivecomputingisbecomingmoreandmorepopularbothat homeandabroad．Asatypicalbranchofbigdata，remotesensingdataischraacterizedbothbythevarietyofthedata sourcesandthehugedataquantiyt．Oneofthebiggestchallengesfacingtheremotesensingapplicationishow tofind outadata—intensivecomputingmethodwhichaimsattheautomation ofthebusinessprocessionsofremotesensing images．Inthispaper,anew data—intensivecomputingmethodfortheprocessionofremotesensingimagesisproposed． Afteradeeplystudyfocusingontheautomationofthebusinessprocessionsofremotesensingdata,anew systematic architecutreusingworkftow isintroducedwhichcancoordinatetheworkamongdifferentalgorithm models．Inaddition， inthepre—processingoftheremotesensingimages，anew computingarchitecturewithfivedifferenttypesofparallelism andastageofaccelerationisalso adopted．Thecomputingmethodproposedinthispaperhasbeentestedinmany productsinrealproductionenvironmentinordertotestifyitseffectiveness．Theresultsshow asignificantimprovement ontheefficiencyofthepre—processingofremotesensingdataintheconditionofensuringtheprocessingprecision． Keywords：remotesensingdata；remotes