集团大数据智能分析应用探讨.pdfVIP

25 2013，49($2) ComputerEngineeringandApplications计算机工程与应用 集团大数据智能分析应用探讨 袁炜 YUANWei 上海纺织(集团)有限公司，上海200336 ShangtexHoldingCo．，Ltd．，Shanghai200336，China E—mail：yuanwei@shangtex．biz YUAN data and Wei．Bigintelligentanalysisapplication．Computer Engineering Abstract：In aredescribedinthis data of groupenterprises briefly intelligent big analysisapplication ternfunction and discussesthe of data security system，and urgencybig analyticsapplication，analysisarchitecture， platform on data andthearchitectureofthe is characteristics，focusintelligent big analysisplatform，function systemimplemented． Keywords：data；intelligentanalysis；architecture 摘要：简述在集团型企业中实现大数据智能分析应用的需求、目标、系统功能和安全体系，探讨了大数据分析应周的迫 切性，分析平台的架构、特性，重点介绍大数据智能分析平台的架构体系、功能及实现方式。 关键词：大数据；智能分析；架构 文献标志码：A 中图分类号：TP391 l 应用需求 3平台架构 上海龙头(集团)股份有限公司(以下简称：龙头股份) 本平台总体架构如图l。 是中国首批股份制上市公司，以纺织品品牌经营和国际贸 (1)数据结构 易为核心业务。公司拥有在国内市场享有盛誉的“三枪”、 源系统数据区 “菊花”、“海螺”、“民光”、“凤凰”、“钟牌414”和“皇后”等知 该平台源系统数据包含两个部分数据：一部分为源业 名品牌，公司掌控着由8000多个营销网点组成的庞大内 务系统数据，包含现有的集团型业务源系统数据；另一部 销网络，被摩根斯坦利评估为“中国内衣市场最完善的营 分为数据补录系统接入的源数据。 销渠道”。公司拥有雄厚的设计研发与生产加工能力为公 仓库基础数据区 司的品牌发展提供有力的保障。 存储源EDW基础数据，对数据进行系统级、主题级数 随着业务的快速发展给公司管理提出了更高要求，一 据整合，为后续的数据应用提成支撑，该数据区有大量的 方面在集团快速发展同时要不断加强集团管控，降低管理 表Join、Merge、Lookup处理。 风险，实