软件测试 -- 入门 4 软件测试原则

Posted 2022-09-21 Rolei_zl

   自己动手，自己动脚，用自己的眼睛观察，这是我们实验工作的最高原则。 -- 巴甫洛夫

原则太多不如没有，个人眼中的测试原则

• 原则 1：软件测试是为提升软件质量进行的软件验证、确认活动，极富创造性、挑战性
• 原则 2：软件测试应充分考虑软件运行环境，全面定义环境、数据、输入、输出的期望值
• 原则 3：软件缺陷永远存在，在未执行测试前，不应认为或默许软件不存在某些或某种缺陷
• 原则 4：应当把“尽早的和不断的进行软件测试”作为软件测试者的座佑铭
• 原则 5：穷尽测试是不可能的，测试需要终止，质量第一，足够就好
• 原则 6：保持对缺陷的敏感度，避免杀虫剂效应；不断分析改进，有针对性的执行测试
• 原则 7：关注质量，关注测试过程，关注过程数据，持续学习、持续管理、持续改进

>> 软件测试目标

• 原则 1：软件测试是为发现错误而执行程序的过程
• 原则 2：软件测试是为提升软件质量进行的软件验证、确认活动
  - 软件测试是指通过测试验证活动找出软件错误、并最终修改、提升软件质量的过程
  - 软件测试是证明软件不存在错误的过程
  - 软件测试是证明软件正确完成预定功能的过程
  - 软件测试是证明软件“做了软件应该做的”的过程
  - 软件测试活动对质量的证明可以增加软件开发过程参与者的信息
• 原则 3：质量第一，平衡软件时间、成本、范围的关系，达到预期的最佳质量
• 原则 4：软件测试应尽量避免随意性，测试应当是有组织、有计划、有步骤的活动
• 原则 5：软件测试是一项极富创造性、极具智力挑战性的工作

>> 软件测试设计

• 原则 1：软件测试设计应先期确认验证和验收质量标准，以制定测试计划、设计测试类型
• 原则 2：做好软件测试计划，测试计划决定了测试的有效性和效率
• 原则 3：软件测试设计应基于用户需求，应以实际用户应用场景为基础进行设计
• 原则 4：软件测试设计应满足软件从底层（LLT）到上层（HLT）的所有验证层次
• 原则 5：软件测试设计应满足功能和非功能需求（单元、功能、模块、业务场景、数据链...）
• 原则 6：软件测试设计应充分考虑软件运行环境和数据、软件运行的上下文场景
• 原则 7：软件测试设计应充分考虑数据、场景执行可重复、可再现，避免测试用例频繁变动

>> 软件测试用例

• 原则 1：好的测试用例能够发现未知的错误
• 原则 2：好的测试用例能够对未发现的错误高度敏感
• 原则 3：好的测试用例应可重复执行，在相同条件下应能复现缺陷出现的过程
• 原则 4：好的测试用例应仔细定义环境、数据、输入、输出的期望值
• 原则 5：好的测试用例测试输入：数据 + 流程 -> 有效和标准 + 无效和非标准

>> 软件测试执行

• 原则 1：未执行软件测试前，不应认为或默许软件不存在某些或某种缺陷
• 原则 2：应尽可早的介入测试，并不断的进行测试
• 原则 3：应当把“尽早的和不断的进行软件测试”作为软件测试者的座佑铭
• 原则 4：缺陷永远存在，零缺陷只是一种理念
• 原则 5：测试无法显示软件潜在的缺陷
• 原则 6：穷尽测试是不可能的，测试需要终止
• 原则 7：平衡“足够好”，基于质量标准，充分考虑软件测试的投入产出
• 原则 8：编码人员应避免只由自己测试自己编写的程序，第三方测试更客观、有效
• 原则 9：软件测试验证程序错误：1) 未做其应该做的；2）做了其不该做的
• 原则 10：关注缺陷聚集效应：缺陷发现越多的模块，则可能会存在和发现更多的缺陷
  即帕累托法则（80/20 法则）：80%的缺陷来自20%的模块。
  因此应对缺陷保持足够的敏感，对缺陷发现的重点模块进行充分的分析、设计和验证。
• 原则 11：避免杀虫剂悖论现像，根据测试执行更新测试用例、调整人员进行交叉测试
  杀虫剂悖论（长期用药，害虫关生抗药性）：缺陷免疫现像，指同一批测试者、使用同一套测试用例、长期执行同一模块测试验证工作，对缺陷的敏感度减弱，发现缺陷的效率下降。
• 原则 12：应记录、检查、分析、跟踪每个测试用例执行结果
• 原则 13：软件测试报告是测试结果整理、分析的产物，评价软件质量、体现软件测试价值

>> 软件测试过程

• 原则 1：注意软件测试过程管理，保证软件测试过程可追溯
• 原则 2：注意软件测试过程环境、数据、操作、文档记录，便于问题/缺陷复现和跟踪
• 原则 3：以测代评，基于软件测试过程活动及结果，更能准确的评价软件质量
• 原则 4：软件测试不应只是软件开发生命周期最后一阶段的活动，而是软件交付之前、软件开发最后一项工作应以软件测试为主导、为工作重点
• 原则 5：软件测试活动应贯穿软件开发的全过程、覆盖软件开发过程的所有产出物
• 原则 6：任何程序修改（代码、配置、环境）都会造成新的错误，因此每次程序修改都要进行分析、执行必要的测试
• 原则 7：软件测试过程应以质量标准为基础，使用适当的测试方法、测试工具，不断提升效率、改进测试效果
• 原则 8：测试思想驱动测试执行，测试工具辅助测试实现，持续关注测试效率提升和效果展示
• 原则 9：软件测试过程应遵循持续改进原则，不断吸纳新的软件工程理念

参考：《软件测试的艺术 .  The Art of Software Testing》