面向领域的大数据分析流程模型转换方法.pdfVIP

总第390期计算机与数字工程Vol.50No.4

ComputerDigitalEngineering

2022年第4期计算机与数字工程865

2022年第4期

面向领域的大数据分析流程模型转换方法∗

文必龙李艳春

（东北石油大学计算机与信息技术学院大庆163318）

摘要为了保证多学科领域背景下的数据挖掘分析与知识发现，使大数据分析兼顾领域复杂性、数据分析易用性和

执行高效性。提出了领域业务驱动的大数据分析流程建模，指导大数据分析流程模型的构建及实施，将大数据分析流程划

分为面向领域和面向平台的双层模型，并通过基于模型驱动的模型映射方法自动完成二者之间的转换。其中面向领域的分

析模型从领域业务角度进行定义，使用户在大数据分析流程构建阶段专注于分析逻辑本身，无需关心特定算法计算以及流

程执行的实现细节；面向平台的分析模型从计算和执行的角度进行定义，使大数据分析流程在执行阶段充分利用平台的计

算资源、存储资源和算法资源，提高流程的执行效率和算法的计算速度。最后，以Hadoop平台作为底层执行平台为例，阐述

了面向领域的大数据分析流程模型的转换过程。

关键词大数据分析；模型驱动；模型映射；领域驱动；分布式

中图分类号TP391.7DOI：10.3969/j.issn.1672-9722.2022.04.035

Domain-orientedTransformationMethodforBigDataAnalysis

ProcessModel

WENBilongLIYanchun

（SchoolofComputerandInformationTechnology，NortheastPetroleumUniversity，Daqing163318）

AbstractInordertoensuredatamininganalysisandknowledgediscoveryinthecontextofmulti-disciplinaryfields，bigda⁃

taanalysistakesintoaccountdomaincomplexity，dataanalysiseaseofuse，andefficientexecution.Thedomain-drivenbigdata

analysisprocessmodelingisproposedtoguidetheconstructionandimplementationofbigdataanalysisprocessmodels.Thebigdata

analysisprocessisdividedintoadomain-orientedandplatform-orientedtwo-layermodel，andthetransformationbetweenthetwo

isautomaticallydonethroughthemodel-drivenmodelmappingmethod.Thedomain-orientedanalysismodelisdefinedfromtheper⁃

spectiveofdomainbusiness，allowinguserstofocusontheanalysislogicitselfduringthebigdataanalysisprocessconstruction

phase，with