《市场调查与分析》课件——大数据技术及应用.pptxVIP

大数据技术及应用大数据分析是指对规模巨大的数据进行采集、分析，它充分利用数据仓库、数据分析、数据挖掘等技术，实现大数据的商业价值。大数据技术主要包含以下几方面：大数据采集大数据预处理大数据存储大数据分析挖掘大数据技术及应用大数据采集大数据采集即对各种来源的结构化和非结构化海量数据，所进行的采集。其主要采集途径有三种：1、数据库采集2、网络数据采集（网络爬虫）3、文件采集采集技术大数据技术及应用大数据预处理大数据预处理指的是在进行数据分析之前，先对采集到的原始数据所进行的一系列操作，旨在提高数据质量，为后期分析工作奠定基础。1、数据清理2、数据集成3、数据转换4、数据规约预处理大数据技术及应用大数据存储大数据存储，指用存储器，以数据库的形式，存储采集到的数据的过程。包含三种典型路线：1、基于MPP架构的新型数据库集群2、基于Hadoop的技术扩展和封装3、大数据一体机大数据技术及应用大数据分析挖掘从可视化分析、数据挖掘算法、预测性分析、语义引擎、数据质量管理等方面，对杂乱无章的数据进行萃取、提炼和分析的过程。1、可视化分析2、数据挖掘算法3、预测性分析4、语义引擎5、数据质量管理数据分析挖掘大数据技术及应用大数据应用案例介绍利用大数据分析工具“墨镜”或“帆软”进行大数据分析。此部分内容单独介绍。谢谢观看