ETL数据整合与处理 第2章 源数据获取（1） 优秀教学课件.pptxVIP

源数据获取;;抽取数据库数据，第一步是创建数据库连接，为数据操作提供桥梁。 为了方便抽取MySQL的“demodb”数据库中的数据表，需要创建一个数据库连接，访问“demodb”数据库。;（1） 建立数据库连接。 （2） 设置数据库连接参数。 （3） 测试和预览数据库连接。 （4） 建立共享/停止共享数据库连接。;数据库连接必须在转换工程或任务工程中才能创建，使用Ctrl+N快捷键，首先创建【demodb数据库连接】转换工程。 在【demodb数据库连接】转换工程中，单击【主对象树】选项卡，展开【转换】对象树（ 按钮表示收起状态， 按钮表示展开状态），右键单击【demodb数据库连接】下的【DB连接】对象，弹出快捷菜单，如图所示。 ;单击【新建】选项，弹出创建【数据库连接】对话框，如图所示。 数据库连接参数包含【一般】【高级】【选项】【连接池】和【集群】5类参数。 其中，【一般】参数是必填项，多数情况只需进行【一般】参数设置，即可完成创建数据库连接，其他4项是可选项。 由于【高级】【选项】【连接池】绝大多数情况下采用默认值，一般不需要再设置其参数，本小节主要介绍【一般】参数和【集群】参数的设置。;【一般】参数分为【连接名称】【连接类型】【连接方式】【设置】4部分参数设置。因为【连接类型】参数设置不同，【连接方式】【设置】参数设置也会有所不同，所以必须按照【连接类型】【连接方式】【设置】的顺序进行参数设置。【一般】参数的说明如表所示。 ;设置参数;在【数据库连接】对话框中，对本机的MySQL数据库demodb的连接参数进行设置，如图 2 3所示，此时完成创建“demodbConn”数据库连接。;集群是指单个数据库连接能够连接抽取多个数据库的数据，单击【集群】参数项，进行【集群】参数设置，如图所示。;在【集群】参数设置中，勾选【使用集群】选项后，才能在【命名参数】表中设置集群参数。【分区ID】参数是指用不同的ID名称标识各个数据库，可以是英文字母、数字、中文等字符或组合，而【主机名称】【端口】【数据库名称】【用户】【密码】等参数的说明如前文表中所示。 ;在本机上，有两个名称分别为“demoDB”“testDB”的MySQL数据库，参考【一般】参数设置，在【命名参数】表中，进行参数设置，结果如图所示。 ;单击【测试】按钮，弹出数据库连接测试是否成功的对话框，若正确，则显示正确连接到数据库信息，如图所示；若错误，则显示错误连接数据库的信息，需要重新设置正确的参数。 ;如果使用了【集群】参数，那么【测试】按钮，在弹出的数据库连接测试对话框中，其显示的信息与仅设置了【一般】参数的测试信息略有不同。 测试成功时，将显示参数中的每一个数据库已正确连接；若测试出错，则会提示是哪一个数据库出错。“demoDB”和“testDB”两个数据库均正确连接的测试信息如图所示。;测试正确连接后，单击【浏览】按钮，弹出【数据库浏览器】对话框，如图所示。;单击的 按钮，展开名称为“demodbConn”的数据库，若列出【模式】【表】【视图】【同义词(Synonyms)】等对象，则说明成功地创建了“demodbConn”数据库连接，如图所示。 ;为了避免反复创建相同的数据库连接，在多个不同的转换工程或作业任务中共用相同的数据库，可以考虑建立共享的数据库连接。 在建立好的【demodb数据库连接】转换工程中，单击【主对象树】选项卡，展开【转换】对象树，单击 按钮，展开【DB连接】对象，右键单击“demodbConn”数据库连接名称，弹出快捷菜单，如图所示。 ;单击【共享】选项，数据库连接“demodbConn”共享成功，其他转换工程或任务工程即可共享使用。值的注意的是，共享后的数据库连接名称用粗体字显示，如图所示。 ;数据库连接既可以共享，也可以停止共享。 与共享操作类似，单击【主对象树】选项卡，在【转换】对象树中，单击 按钮展开【DB连接】对象，右键单击显示为粗体字的数据库连接名称（如上图所示的“demodbConn”），在弹出快捷菜单中单击【停止共享】选项，即可停止共享该数据库连接。;;数据表是指具有统一名称，并且类型、长度和格式等元素相同的数据集合，在数据库中，数据是以数据表的形式存储的。 表输入的作用是抽取数据库中的数据表，并获取表中的数据。 为方便查看和统计学生的数学考试分数，需要通过表输入抽取某年级某次考试的数学成绩。;（1） 建立【表输入】转换工程。 （2） 设置【表输入】组件参数。 （3） 预览数据。;在demodb数据库中的“数学成绩”表，字段说明如表所示。 ;使用Ctrl+N快捷键，创建【表输入】转换工程，参上一小节中介绍的操作，创建名称为“demodbConn”的数据库连接，并测试成功。 在【表输入】转换工程中，单