【引领】对标DevOps,探索掌银测试转型之路

DevOps强调测试分层和自动化测试。掌银测试团队在传统和敏捷测试基础上，主动作为，创新思路，快速适应DevOps持续交付下的测试工作机制。

重构分层策略，固化流水线管理。针对函数、模块、交互等不同测试对象分别开展测试。项目组通过流水线固化了每次迭代应开展的测试种类，包括单元测试、接口测试、界面自动化测试、手工测试、业务安全测试、非功能测试等。任何一种应开展但未开展的测试都会被直观的反映到流水线中，提醒并督促项目组及时开展对应测试，避免所有代码问题都堆积到手工测试阶段。

推进分层自动化测试，实现产品快速验证与交付。掌银自动化测试分层是在传统测试金字塔模型基础上，对界面自动化进行优化，解决高投入和低产出的矛盾。界面自动化测试接近用户真实场景且容易发现问题的特性对掌银这类端到端系统来说尤为重要，但缺点是实现成本高和外部依赖强。为实现在较小的成本代价下尽可能全面的对掌银界面进行自动化覆盖，测试人员采用固化前置脚本、合并交易脚本等方式对界面自动化脚本进行改进，提高脚本覆盖能力，降低覆盖成本。

DevOps突出工具支撑。掌银测试团队自研了移动端界面自动化测试平台集成及手工测试数据准备平台等支撑工具，实现了测试工作流水线实施及测试数据准备自动化。

移动端界面自动化测试平台集成到TFS流水线。掌银DevOps建设前期，测试人员在移动端界面自动化平台中积累了大量的界面自动化测试脚本。但移动端界面自动化测试平台尚未集成到TFS流水线，无法通过流水线调起界面自动化测试脚本，在流水线中对掌银界面进行自动化测试就成为了缺失一环。为解决这一问题，测试人员和组织级紧密合作，克服多平台、多框架难题，通过“TFS调用擎云平台，擎云平台调用移动端平台”的调用逻辑，打通掌银界面自动化和DevOps流水线之间的断点，完成移动端界面自动化测试平台与TFS流水线的工具集成，成功将移动端界面自动化纳入到DevOps流水线。

测试人员着重从以下四个方面降低误报率，提升测试环境可用性：一是优化自动化案例逻辑，提高案例健壮性。如在案例中增加“try/catch”异常处理机制；二是引入mock机制，实现对后台的解耦。如对登录交易和加密解密交易，测试人员均采用了mock机制，降低了对后台的依赖；三是协调后台发版窗口。错峰执行自动化，避免因后台程序变动引起误报；四是以wiki方式组织推动关联系统环境恢复。若因关联系统环境失效而导致掌银环境不可用时，测试人员及时在TFS中建立工作项，推送至对应的产品负责人进行跟踪处理，实现问题快速定位，并向关联系统联系人进行反馈，推动关联系统尽快恢复环境。