大数据行业算法部工程师数据算法开发手册（执行版）.docxVIP

大数据行业算法部工程师数据算法开发手册（执行版）

第一章数据治理与基础架构

1.1数据资产盘点与目录管理

需建立“数据资产主数据管理（MDM）”机制，由数据治理委员会牵头，联合业务部门对全量数据进行拉取、清洗与标准化映射。这一步骤旨在消除数据孤岛，确保同一业务对象（如“用户”或“订单”）在全局范围内拥有唯一且唯一的标识符（如ETL的`biz_user_id`或`order_no`），从而为后续盘点提供统一的锚点。在资产盘点阶段，必须采用“数据字典+血缘图谱”双轮驱动模式。对于业务层面，需梳理出包含字段定义、数据来源、更新频率、业务口径及责任人等维度的《数据资产元数据字