2021年面试ETL题总汇.pdfVIP

云路鹏程九万里，雪窗萤火二十年。——《王实甫》 ETL 面试题总汇 一、分析 1．什么是逻辑数据映射？它对ETL 项目组作用是什么？ What is a logical data mapping and what does it mean to the ETL team? 答： 逻辑数据映射（Logical Data Map）用来描述源系统数据定义、目的数据仓库模型以及将源 系统数据转换到数据仓库中需要做操作和解决方式阐明文档，普通以表格或Excel 格式保存 如下信息： 目的表名： 目的列名： 目的表类型：注明是事实表、维度表或支架维度表。 SCD 类型：对于维度表而言。三种SCD （Slowly Changing Dimension ）技术 SCD1 直接修改原维表信息，不保存任何维历史信息。 SCD2 创立新记录而不删除或修改原有维信息。可通过为每条记录设定过期时间、生效时间 两个字段来区别各历史记录和当前记录（历史记录过期时间均早于当前记录生效时间）。 SCD3 在维表中定义历史信息字段，只保存有限历史信息（此技术很少应用） 源数据库名：源数据库实例名，或者连接字符串。 源表名： 源列名： 转换办法：需要对源数据做操作，如Sum(amount)等。 逻辑数据映射应当贯穿数据迁移项目始终，在其中阐明了数据迁移中ETL 方略。在进行物 理数据映射迈进行逻辑数据映射对ETL 项目组是重要，它起着元数据作用。项目中最佳选 取能生成逻辑数据映射数据迁移工具。 吾日三省乎吾身。为人谋而不忠乎？与朋友交而不信乎？传不习乎？——《论语》 丹青不知老将至，贫贱于我如浮云。——杜甫 补充： 逻辑数据映射分为两种: 1：模型映射: 从源模型到DW 目的模型之间映射类型有： 一对一：一种源模型数据实体只相应一种目的模型数据实体。如果源类型与目的类型一致， 则直接映射。如果两者间类型不同样，则必要通过转换映射。 一对多：一种源模型数据实体只相应各种目的模型数据实体。在同一种数据存储空间，经常 浮现会一种源实体拆分为各种目的实体状况下。在不同存储空间中，成果会相应到不同存储 空间实体。 一对零：一种源模型数据实体没有与目的模型数据实体有相应，它不在咱们解决筹划范畴之 内。 零对一：一种目的模型数据实体没有与任何一种源数据实体相应起来。例如只是依照设计考 虑，时间维表等。 多对一：各种源模型数据实体只相应一种目的模型数据实体。 多对多：各种源模型数据实体相应各种目的模型数据实体。 2：属性映射 一对一：源实体一种数据属性列只相应目的实体一种数据属性列。如果源类型与目的类型一 致，则直接映射。如果两者间类型不同样，则必要通过转换映射。 一对多：源实体一种数据属性列只相应目的实体各种数据属性列。在同一种实体中，经常浮 现会一种源属性列拆分为目的各种属性列状况。在不同实体中，成果会相应到不同实体属列。 一对零：一种源实体数据属性列没有与目的实体数据属性列有相应，它不在咱们解决筹划范 畴之内。 好学近乎知，力行近乎仁，知耻近乎勇。——《中庸》 先天下之忧而忧，后天下之乐而乐。——范仲淹 零对一：一种目的实体数据属性列没有与任何一种源数据属性列相应起来。例如只是依照设 计考虑，维表和事实表中时间戳属性，代理健等。 多对一：源实体各种数据属性列只相应目的实体一种数据属性列。 多对多：源实体各种数据属性列相应目的实体各种数据属性列。 作用: 1 为开发者传送更为清晰数据流信息。映射关系涉及关于数据在存储到DW 前所经历各种 变化信息，对于开发过程中数据追踪审查过程非常重要。 2 把ETL 过程信息归纳为元数据