2025超难度的数据湖迁移分享.docx

1、本文档共18页，其中可免费阅读6页，需付费69金币后方可阅读剩余内容。
2、本文档内容版权归属内容提供方，所产生的收益全部归内容提供方所有。如果您对本文有版权争议，可选择认领，认领后既往收益都归您。
3、本文档由用户上传，本站不保证质量和数量令人满意，可能有诸多瑕疵，付费之前，请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形，可联系本站下载客服投诉处理。
4、文档侵权举报电话：400-050-0827(电话支持时间：9:00-18:30)。

超难度的数据湖迁移分享2025

背景介绍

资源保障

数据迁移

目录任务迁移

平台割接

总结回望

01背景介绍

背景介绍

Re景介绍

表体量大

困难与挑战

任务数量多计算资源多

如何高效利用带宽，平衡增量数据与存量数据的迁移

超大规模数据迁移，如何保障数据一致性

双跑任务的编排，任务之间的流量分配

迁移要求业务影响的最小化，任务改造最小化

复杂项目管理及长周期的资源交付管理

存储体量大

GOPS全球运维大会暨研运数智化技术峰会2024·上海站

Re景介绍——迁云总体方案

源端

EMR集群

配置存储VPC

任务调度系统

专线读阿里云VPC 内网DL

企业信息管理师持证人

新能源集控中心项目智慧电厂建设项目智慧光伏智慧水电智慧燃机智慧工地智慧城市数据中心电力行业信息化

用户编号：6011145050000024

领域认证该用户于2023年02月15日上传了企业信息管理师

更多 >