大数据分析与应用指南.docxVIP

大数据分析与应用指南

第1章大数据基础理论

1.1数据流向与生命周期

数据流向是指数据从产生、采集到最终利用过程中所遵循的路径，通常分为源端采集、传输传输、处理分析、分发消费和反馈闭环五个阶段。例如，当用户网页时，浏览器会立即将HTTP请求封包发送至服务器，服务器接收后将其写入内存，随后经过数据库持久化存储，最后通过API接口推送给前端展示页面，这一过程即构成了完整的数据流向闭环。数据生命周期涵盖了数据从“产生”到“销毁”的全过程，包括数据的产生、存储、处理、共享、归档、清理和销毁等环节。以电商平台的订单数据为例，当用户下单时产生订单数据，系统自动将其存储至关系型数据库，待