在敏捷组织里实施自动化测试的问题及解决之道-Huihoo.PDF

在敏捷组织里实施 自动化测试的问题及解决之道 林曙湧 诺基亚西门子自动化测试教练 • 2001 加入UTStarcom系统测试团队 • 2003-2005 测试团队leader • 2005-2008 自动化测试Team Leader • 2009– 2013诺基亚西门子3G平台开 发部自动化测试教练 • 2013 – Now 测试架构师，Scrum Master • Belief: Testing Could be more creative and interesting than current ways of working 背景介绍 • 移动通信核心网软件平 台 • 非常高的质量要求 • 1200万行的代码 • 10000+的自动化用例 • 平均每天执行5000左右 • 每日编包 • 每周向内部客户发布 常见的一些困惑 • 自动化测试很难开展 • 维护自动化测试的成本太高 • 搞了那么多的持续集成和自动化测试，为什 么客户那边还是有问题？ • 自动化测试很难开 展 为什么自动化测试难开展 • 测试人员缺乏编程技能 • 开发人员对测试缺乏兴 趣 • 自动化团队缺乏领域知 识的深入了解 • 产品可测性缺乏 • 接口经常改变 • 我们太忙了 • …… 我们太忙了 • 对，我们真的很忙 • 忙着做重复低效的事情？ 改变是如何发生的？ 创新者的实践 • 通用型专家 – Testing Mindset – Developing skill • 部分同事的先期投入 • 成功的试点报告 组织上的支持 • 敏捷转型的大背景 • 测试部门和开发部门的融合 • 不断吸收新生力量 • 自动化测试要量更要质 • 固化相应工程实践 • DOD check list 团队协作的自动化实施策略 • 团队共同来计划承担自动化测试的任务 – 开发人员提供编程或者可测性支持 – 开发人员参与写自动化测试用例 • 自动化测试技术本身的不断研究 – Dedicate TA/Tools Team – TA Coach 自动化测试大规模开展了 • 产生了许多自动化 用例 – 70% 用例自动化? • 每天回归测试 • 接下来要做什么呢？ 维护自动化测试的成本太高 分析 • 复杂的自动化测试 • 测试用例的质量问题 • 测试用例的可靠性问题 • 及时解决问题 • 测试用例数目爆炸式增长 • 降低维护成本 复杂的自动化测试I • 难以复现的问题 • 真的是软件问题吗？ • 维护成本很高 复杂的自动化测试II • 控制端到端的自动化用 例数量 – 分层自动化测试 • 控制环境的影响 – 独立的测试环境 复杂的自动化测试III • 实现造成的复杂性 • 自动化测试的架构