大数据分析与决策手册.docx

大数据分析与决策手册

第1章数据采集与预处理

1.1数据来源与类型

数据来源是大数据分析与决策的基础，常见的数据来源包括结构化数据、非结构化数据、实时数据和历史数据。结构化数据如数据库中的表格数据、Excel文件、关系型数据库等；非结构化数据包括文本、图像、音频、视频等；实时数据来自物联网设备、传感器、社交媒体等；历史数据则来源于业务系统、客户记录、交易日志等。数据来源的选择需根据业务需求和数据特性决定。例如，电商企业可能需要从订单系统、用户行为日志、支付平台等获取交易数据；金融行业则可能从交易记录、客户画像、市场报告中获取数据。

数据类型多样，需根据分析目标进行分类。例如，用