基于HIVE面向多企业的经营分析技术应用研究.pdfVIP

第01卷 第05期 2014年12fl 工 业 技 术 创 新 IndustrialTechnologyInnovation Vo1．01No．05 Dec．2014 基于HIVE面向多企业的经营分析技术应用研究 吴明礼，唐榕蔚，李也白 (北方工业大学，信息工程学院，北京，100144) 摘 要：为了满足多企业系统平台为用户提供集中的信息化服务和商业智能化服务的需求，本文 通过对Hive数据仓库技术的应用研究，结合企业经营的实际情况，采用hadoop平台搭建一个平 台级分析系统 ，并对结果进行可视化展示。 关键词：分布式数据库；数据仓库；电子商务 中图分类号 ：TP319 文献标识码 ：A 文章编号 ： 2095-8412(2014)05—609—05 工业技术创新 URL：http／／www．china—iti．com DOI：10．14103j／．issn．2095-8412．2014．05．019 ApplianceandResearchofHIVE DataW arehouseTechnology InM ulti—enterprisesM anagementAnalysisSystem M ingLiW u，RongW eiTang，YeBaiLi (InformationEngineeringCollegeofNorthChinaUniversityof Technology，Beijing，100144，China) Abstract：ordertosatisfythedemand，thatmulti-enterprisessystem platform needtoprovideconcentrated informationization serviceand businessintellectualized service forconsumer，thispaperresearched on Hive DataWarehousetechnology，combinedw ith the actualoperation ofanenterprise．The author developedaplatform-levelanalysissystem usingtheHadoopPlatform anddisplayedtheoutcomevisually． Keywords：DistributedDatabase(DDB)；DataWarehouse；ElectronicCommercef】j-Commerce) 引言 的增加 ，数据量也不断增加。解决这样多企业、分 布式数据库的分析问题 ，主要有两个办法 。一、传 在数据爆炸的今天，能否从海量数据中获取有 统的数据库技术构建数据仓库，针对这种在分布式 效的信息，已经成为能否增加企业竞争力的关键 。 数据库环境下，构建数据仓库的工具和方法并不 现在的企业常会有多家子公司，各子公司的经营数 多。二、hadoop+hvie技术。Hadoop平台利用其重要 据存放在多个数据库；面对这样企业级的分析，需 部件HDFS、MapReduce框架实现分布式存储和并行 要从众多分散的数据库提取多个指标。为了解决分 计算框架 ，能够进行海量数据进行处理和分析 ；使 布式数据仓库的问题现在越来越多的企业比如阿里 用Hadoop提供的Hive搭建数据仓库 ，可以为用户进 巴巴、B2B电子商务企业都选择使用Hadoop+Hive技 行多维分析提供一个高效的接口并且具有很好的扩 术 。 展能力。 面对多企业 的平