Datastage学习总结_new_new重点分析.docx

Datastage学习总结  Datastage介绍 产品概述 DataStage企业版是Ascential Software公司所有企业整合系列产品中关键产品。企业版支持大容量数据的收集、整合和转换，数据从简单结构到很复杂的结构。基于高可扩展性的软件架购，企业版使得企业能够通过高性能来解决大部分业务问题，并行处理大容量数据。强大的企业元数据管理能力使得可以在数据整合生命周期中在所有工具中共享和使用工具。 DataStage企业版发布了四个核心功能来成功实施企业数据整合： 先进的开发和简单化的维护； 企业级别的开发、监测和管理； 在吞吐量和性能方面提供了无限制的高扩展的体系架构； 端对端的企业级元数据管理。 DataStage企业版提供了全面的功能去最优化用户在建立、升级和管理数据整合架构时的速度、灵活性和效率。DataStage企业版增强的功能减少了学习的周期、简单化了管理和优化了开发资源的使用，减少了数据整合应用的开发和维护周期。结果，DataStage企业版使得企业能够花更少的时间开发他们的整合应用，更多的时间是不断的从中受益。 基础架构 客户档介绍 用户通过各个客户端工具访问DataStage企业版的开发、配置和维护功能。这些工具包括： Designer：用来建立和编辑DataStage作业和表的定义。Designer中的“Job Sequencer”控制作业的执行，其他作业成功完成（或失败，等）的条件。 Administrator：用来执行管理任务，如建立DataStage用户、建立和删除工程并且建立清洗标准。 Manager：用来编辑管理用户工程的DataStage资料库。 Director：用来验证、时序安排、运行和监测企业版作业。 日常操作 登录客户端 登录Datastage Administrator 客户机 点击图标 选择需要登录的服务器，输入用户名，密码登录 进去后点击项目，可进行项目增加，删除，设置项目属性 登录Datastage Designer客户机 点击图标 选择需要登录的域，输入用户名，密码，选择需要登录的项目 登录成功： 登录Datastage Director客户机 点击图标 选择需要登录的域，输入用户名，密码，选择需要登录的项目 登录成功： 启停服务端 以dsadm用户进入，执行以下命令： 1) Server启动命令：$HOMEDIR/uv –admin -start 注意：启动前,需要查看端口是否被释放,通过‘netstat –af inet |grep ds’查看，如果有连接，则需要等待操作系统自动释放后在启动服务。 2) Server停止命令：$HOMEDIR/uv –admin /stop 注意：停止前最好确保没有Client连接，可以通过‘onstat –a |grep ds’查看，是否还存在Client连接，否则要通知相应登录的client端彻底退出。 Job编译 登录Datastage Designer客户机，参见2.1.2，打开欲编译的Job，具体Job编译方法有两种： 选择菜单栏的【文件】-【编译（M）】，快捷键为F7。 点击工具栏的编译图标。 Job运行 Datastage Job运行有两种方式：一种在Designer中，一种在Director中。 登录Designer客户机，打开欲运行的Job，选择菜单栏的【文件】-【运行（R）】，快捷键为Ctrl+F5或者点击工具栏的运行图标。 登录Director客户机，选中欲运行的作业，选择菜单栏的【作业（J）】-【立即运行（N）】，或者点击工具栏的立即运行图标。 监视作业 登录Director客户机，选中欲监视的作业，右键选择【监视】，可以查看作业的运行情况。如下图所示： 查看日志 登录Director客户机，选中欲查看日志的作业，右键选择【查看日志】 出现： 作业解锁 方法１ 如遇到断网等一些情况可能导致作业被某一锁定，从而无法对作业进行修改。 解锁方法： 在浏览器输入Server端IP地址跟端口，如 HYPERLINK :9080 :9080, 出现如下界面： 输入用户名，密码，登录后选择 【管理】-【会话管理】-【活动会话】，对那个被锁定作业的会话，选择【断开链接】 方法２ 1 用管理员用户登录DataStage Administrator 2 打开对应PROJECT的【命令（Ｍ）】 3 执行　LIST.READU　查看Locks 4 通过最后一列item id找到被锁的对应的作业名 5 执行下面命令解锁 UNLOCK USER Userno ALL 其中username 为LIST.READU 所列出的信息中对应的Userno 。 Job导入 登录Designer客户机，选择菜单栏的【导入（I