3.2 大数据采集概述.pptx

XXXXXXXX.XX主讲人：时间：第3章数据采集

BYYUSHENBYYUSHEN大数据采集技术发展趋势01.大数据采集概述02.大数据采集方法03.大数据采集类型04.常见采集问题及注意事项05.CONTENTS目录

02大数据采集概述

大数据采集是获取海量、高速、多变数据的过程，目标为捕获全面有价值的信息，以支持后续深入分析、挖掘和应用。数据源包括社交网络、网络日志、传感器、数据库、在线交易等内部系统、商业交易、社交媒体、公共数据集。采集的数据量通常达到TB(太字节)甚至PB(拍字节)级别，处理如此海量的数据需要高效的存储和进程管理能力。数据采集需支持高速实时或近实时；确保数据的