文章目录
- 1. 按照测试目标分类
- 1.1 界面测试
- 1.2 功能测试
- 1.3 性能测试
- 1.4 可靠性测试
- 1.5 安全性测试
- 1.6 易用性测试
- 2. 按照执行方式分类
- 2.1 静态测试
- 2.2 动态测试
- 3. 按照测试方法分类
- 3.1 白盒测试
- 3.1.1 语句覆盖
- 3.1.2 判定覆盖
- 3.1.3 条件覆盖
- 3.1.4 判定条件覆盖
- 3.1.5 条件组合覆盖
- 3.1.6 路径覆盖
- 3.2 黑盒测试
- 3.3 灰盒测试
- 4. 按照测试阶段分类
- 4.1 单元测试
- 4.2 集成测试
- 4.3 系统测试
- 4.3.1 冒烟测试
- 4.3.2 回归测试
- 4.4 验收测试
- 5. 按照是否手工测试分类
- 5.1 手工测试
- 5.2 自动化测试
- 5.3 自动化测试和手工测试优缺点
- 6. 按照实施组织划分
- 6.1 α测试
- 6.2 β测试
- 6.3 α测试和β测试的区别
- 6.4 第三方测试
- 7. 按照测试地域划分
1. 按照测试目标分类
1.1 界面测试
界面测试,简称UI测试,指按照界面的需求(一般是UI设计稿)和界面的设计规则,对我们软件界面所展示的全部内容进行测试和检查,一般包括如下内容:
- 验证界面内容显示的完整性,一致性,准确性,友好性。比如界面内容对屏幕大小的自适应,换行,内容是否全部清晰展示;
- 验证整个界面布局和排版是否合理,不同板块字体的设计,图片的展示是否符合需求;
- 对界面不同控件的测试,比如,对话框,文本框,滚动条,选项按钮等是否可以正常使用,有效和
- 无效的状态是否设计合理;
- 界面的布局和色调符合当下时事的发展。
1.2 功能测试
功能测试就是对产品的各功能进行验证,根据功能测试用例,逐项测试,检查产品是否达到用户要求的功能。
根据产品特性、操作描述和用户方案,测试一个产品的特性和可操作行为以确定它们满足设计需求。本地化软件的功能测试,用于验证应用程序或网站对目标用户能正确工作。使用适当的平台、浏览器和测试脚本,以保证目标用户的体验将足够好,就像应用程序是专门为该市场开发的一样。功能测试是为了确保程序以期望的方式运行而按功能要求对软件进行的测试,通过对一个系统的所有的特性和功能都进行测试确保符合需求和规范。
如何进行功能测试?
设计功能测试用例,参考产品规格说明书进行用例的编写,具体的测试用例需要使用黑盒设计测试用例的方法,如等价类、边界值、判定表法、正交法、场景法、错误猜测法等。
1.3 性能测试
我们在使用软件的时候有时会碰到软件网页打开时越来越慢,查询数据时很长时间才显示列表,软件运行越来越慢等问题,这些问题都是系统的性能问题引起的。
要进行软件产品的性能问题,要对产品的性能需求进行分析,然后基于系统的性能需求和系统架构,完成性能测试的设计和执行,最后要进行持续的性能调优。
1.4 可靠性测试
可靠性(Availability)即可用性,是指系统正常运行的能力或者程度,一般用正常向用户提供软件服务的时间占总时间的百分比表示。
可靠性=正常运行时间/(正常运行时间+非正常运行时间)*100%
系统非正常运行的时间可能是由于硬件,软件,网络故障或任何其他因素(如断电)造成的,这些因素能让系统停止工作,或者连接中断不能被访问,或者性能急剧降低导致不能使用软件现有的服务等。
可用性指标一般要求达到4个或5个“9”即99.99%或者99.999%
如果可用性达到99.99%,对于一个全年不间断(7*24的方式)运行的系统,意味着全年(252600min)不能正常工作的时间只有52min,不到一个小时。
如果可用性达到99.999%,意味着全年不能正常工作的时间只有5min。
不同的应用系统,可用性的要求是不一样的,非实时性的信息系统或一般网站要求都很低,99%和99.5%就可以了,但是军事系统,要求则很高;
1.5 安全性测试
安全性是指信息安全,是指计算机系统或网络保护用户数据隐私,完整,保护数据正常传输和抵御黑客,病毒攻击的能力。
安全性测试属于非功能性测试很重要的一个方面,系统常见的安全漏洞和威胁如下
- 输入域,如输入恶性或者带有病毒的脚本或长字符串;
- 代码中的安全性问题,如SQL/XML注入
- 不安全的数据存储或者传递
- 数据文件,邮件文件,系统配置文件等里面有危害系统的信息或者数据;
- 有问题的访问控制,权限分配等
- 假冒ID:身份欺骗
- 篡改,对数据的恶意修改,破坏数据的完整性
安全性测试的方法有代码评审,渗透测试,安全运维等,常用的静态安全测试工具有,Coverity,IBMAppscanSource,HPFortify,常用的动态安全测试有OWASP的ZAP,HPWeblnspect等。其中静态安全测试是常用的安全性测试的方法。
1.6 易用性测试
许多产品都应用人体工程学的研究成果,是产品在使用起来更加灵活和,舒适。软件产品也始终关注用户体验,让用户获得舒适,易用的体验,针对软件这方面的测试称之为易用性测试。
易用性在IS025020标准中指容易发现,容易学习和容易使用。易用性包含七个要素:符合标准和规范,直观性,一致性,灵活性,舒适性,正确性和实用性。
我们主要讨论以下几个方面
- 标准性和规范性
对于现有的软件运行平台,通常其UI标准已经不知不觉地被确立了,成为大家的共识。多数用户已经习惯并且接受了这些标准和规范,或者说已经认同了这些信息所代表的的含义。比如安装软件的界面的外观,在什么场合使用恰当的对话框等。
所以用户界面上的各中信息应该符合规范和习惯,否则用户使用起来会不舒适,并得不到用户的认可。测试人员需要把与标准规范,习惯不一致的问题报告为缺陷. - 直观性
用户界面的直观性,要求软件功能特性易懂,清晰。用户界面布局合理,对操作的响应在用户的预期之中。比如数据统计结果用报表的形式(条形图,扇形图等)展示清晰直观;现在主流的很多搜索引擎和日历的设计也有直观性的特点 - 灵活性软件可以有不同的选项以满足不同使用习惯的用户来完成相同的功能。但是灵活性的设计要把握好度,不然可能由于太多的用户状态和方式的选择,增加了软件设计的复杂性,和程序实现的难度。例如手机键盘有九宫格和全键盘,还支持手写,满足了不同用户的需求.
- 舒适性
舒适性主要强调界面友好,美观,操作过程顺畅,色彩用运恰当,按钮的立体感等。例如左手鼠标的设置给习惯用左手的人带来了便利,也为右手十分劳累时提供了另一种途径;舒适性主要强调界面友好,美观,操作过程顺畅,色彩用运恰当,按钮的立体感等。例如左手鼠标的设置给习惯用左手的人带来了便利,也为右手十分劳累时提供了另一种途径.
2. 按照执行方式分类
2.1 静态测试
所谓静态测试(statictesting)就是不实际运行被测软件,而只是静态地检查程序代码、界面或文档中可能存在的错误的过程。
不以测试数据的执行而是对测试对象的分析过程,仅通过分析或检查源程序的设计、内部结构、逻辑、代码风格和规格等来检查程序的正确性。常见的静态测试方式有代码走查,代码扫描工具等。
2.2 动态测试
动态测试(dynamictesting),指的是实际运行被测程序,输入相应的测试数据,检查实际输出结果和预期结果是否相符的过程,所以判断一个测试属于动态测试还是静态的,唯一的标准就是看是否运行程序。大多数软件测试工作都属于动态测试
3. 按照测试方法分类
3.1 白盒测试
白盒测试又称为结构测试或逻辑测试,它一般用来分析程序的内部结构,针对程序的逻辑结构来设计测试用例进行测试。
白盒测试的测试目的是,通过检查软件内部的逻辑结构,对软件中的逻辑路径进行覆盖测试;在程序不同地方设立检查点,检查程序的状态,以确定实际运行状态与预期状态是否一致。
白盒测试主要分为静态测试和动态测试两种。
- 静态测试常见于桌面检查、代码审查、代码走查、代码扫描工具.
- 动态测试方法主要包含六种测试方法:语句覆盖、判定覆盖、条件覆盖、判定条件覆盖、条件组合覆盖、路径覆盖。
给出简单的案例,接下来了解⼀下⽩盒测试⽅法的概念和使⽤:
3.1.1 语句覆盖
3.1.2 判定覆盖
if语句就是判定语句,if语句:if条件要么为真,要么为假。
3.1.3 条件覆盖
3.1.4 判定条件覆盖
3.1.5 条件组合覆盖
3.1.6 路径覆盖
3.2 黑盒测试
黑盒测试就是在完全不考虑程序逻辑和内部结构的情况下,检查系统功能是否按照需求规格说明书的规定正常使用、是否能适当的接收输入数据而输出正确的结果,满足规范需求。
所以,黑盒测试又称之为数据驱动测试,只注重软件的功能。
黑盒测试的优点
- 不需要了解程序内部的代码以及实现,不关注软件内部的实现。
- 从用户角度出发设计测试用例,很容易的知道用户会用到哪些功能,会遇到哪些问题,锻炼测试人员的产品思维
- 测试用例是基于软件需求开发文档,不容易遗漏软件需求文档中需要测试的功能。
黑盒测试的缺点:不可能覆盖所有代码。
黑盒测试用到的测试方法: 等价类,边界值,因果图,场景法,错误猜测法等
3.3 灰盒测试
灰盒测试,是介于白盒测试与黑盒测试之间的一种测试,灰盒测试多用于集成测试阶段,不仅关注输出、输入的正确性,同时也关注程序内部的情况。
但是,灰盒测试没有白盒测试详细和完整,黑盒测试是覆盖产品范围最广的测试,因此灰盒测试基本是不能够替代黑盒测试,否则需要很大的代价,设计非常多的用例。
面试题
你知道的测试方法有哪些?哪种用的比较多?
常见的测试方法有黑盒测试,白盒测试和灰盒测试。开发人员主要用白盒测试和灰盒测试,测试人员主要用白盒测试和黑盒测试。对于测试人员来说,相较于白盒测试,黑盒测试用的更多一些。
4. 按照测试阶段分类
4.1 单元测试
对于程序的最小单元来执行测试,“最小单元”是人为规定的。
4.2 集成测试
把最小单元集成在一起执行测试,既要保证代码没有问题,也要保证软件的主要功能也没有问题。
4.3 系统测试
4.3.1 冒烟测试
这一术语源自硬件行业。对一个硬件或硬件组件进行更改或修复后,直接给设备加电。如果没有冒烟,则该组件就通过了测试。在软件中,“冒烟测试”这一术语描述的是在将代码更改嵌入到产品的源树中之前对这些更改进行验证的过程。在检查了代码后,冒烟测试是确定和修复软件缺陷的最经济有效的方法。冒烟测试设计用于确认代码中的更改会按预期运行,且不会破坏整个版本的稳定性。
冒烟测试的对象是每一个新编译的需要正式测试的软件版本,目的是确认软件主要功能和核心流程正常,在正式进行系统测试之前执行。冒烟测试一般在开发人员开发完毕后提交给测试人员来进行测试时,先进行冒烟测试,保证基本功能正常,不阻碍后续的测试。
如果冒烟测试通过,则测试人员开始进行正式的系统测试,如果不通过,则测试人员可以让开发人员重新修复代码直到冒烟测试通过,再开始进行系统测试。
4.3.2 回归测试
回归测试是指修改了旧代码后,重新进行测试以确认修改没有引入新的错误或导致其他代码产生错误。
在整个软件测试过程中占有很大的工作量比重,软件开发的各个阶段都会进行多次回归测试。随着系统的庞大,回归测试的成本越来越大,通过选择正确的回归测试策略来改进回归测试的效率和有效性是很有意义的。
回归测试主要由人工测试和自动化测试进行。
在实际工作中,回归测试需要反复进行,当测试者一次又一次地完成相同的测试时,这些回归测试将变得非常令人厌烦,而在大多数回归测试需要手工完成的时候尤其如此,因此,需要通过自动测试来实现重复的和一致的回归测试。通过测试自动化可以提高回归测试效率。为了支持多种回归测试策略,自动测试工具应该是通用的和灵活的,以便满足达到不同回归测试目标的要求。
我们能够想象出来人工回归的流程,但是自动化测试又是什么样的呢?
回归测试和冒烟测试都属于系统测试。
回归测试和系统测试之间的区别?
- 冒烟测试(Smoke Testing):
- 阶段:通常在软件开发的早期阶段进行,主要用于验证基本功能是否正常工作。
- 目的:确保软件的主要功能能够基本运行,以便在后续的详细测试阶段发现更深层次的问题。
- 回归测试(Regression Testing):)
- 阶段:在软件开发的后期,通常在每次代码修改或新增功能后执行。)
- 目的:确保已有的功能仍然正常工作,并且新的更改没有引入新的错误。目的是防止已有功能因为代码修改而出现问题。
虽然它们都属于系统测试,但冒烟测试注重最基本的功能,而回归测试关注全面的功能,包括已有功能和新添加的功能。这两种测试类型在测试策略中起到了不同的作用,帮助确保软件质量和稳定性。
4.4 验收测试
产品经理 / 甲方。
5. 按照是否手工测试分类
5.1 手工测试
⼿⼯测试就是由⼈去⼀个⼀个的输⼊⽤例,然后观察结果,和机器测试相对应,属于⽐较原始但是必须的⼀个步骤。
5.2 自动化测试
就是在预设条件下运⾏系统或应⽤程序,评估运⾏结果,预先条件应包括正常条件和异常条件。简单说⾃动化测试是把以⼈为驱动的测试⾏为转化为机器执⾏的⼀种过程。⾃动化测试⽐如功能测试⾃动化、性能测试⾃动化、安全测试⾃动化。⾃动化测试按照测试对象来分,还可以分为接⼝测试、UI测试等。接⼝测试的ROI(产出投⼊⽐)要⽐UI测试⾼。
5.3 自动化测试和手工测试优缺点
自动化测试优点:
- 节约成本
- 提高测试人员的执行工作效率
- 保障软件的质量
自动化测试缺点: - 对测试人员技术要求较高
- 不能发散性测试
手工测试优点:
- 对测试人员技术要求没有自动化技术要求高。
- 可以进行发散性测试
** 手工测试缺点:** - 效率低
- 人员、时间成本比起自动化测试都比较高
6. 按照实施组织划分
6.1 α测试
α测试⼜叫内测或者叫a测,其实都是⼀个涵义。
α测试通常是公司内部的⽤⼾在模拟实际操作环境下进⾏的测试。α测试的⽬的是评价软件产品的FLURPS(即功能、可使⽤性、可靠性、性能和⽀持)。α测试不能由程序员或测试员完成。
6.2 β测试
β测试⼜叫公测或者叫b测
β测试由软件的最终⽤⼾们在⼀个或多个场所进⾏,这⾥就可以理解为,β测试是正式⽤⼾中的⼀部分,他们在任意的场合来使⽤软件,⽬的是为了发现软件是否存在⼀系列的问题。
6.3 α测试和β测试的区别
测试的场所不同:α测试是在公司内部进行测试的,但是β测试是在用户环境下进行测试的
α测试的环境是受开发方控制的,用户的数量相对比较少,时间比较集中。β测试的环境是不受开发方控制的,用户数量相对比较多,时间不集中。
测试执行时机不同:a测试先于B测试执行。通常是a测试通过后,在进行β测试测试持续时间长短不同:α测试时间没有β测试持续时间长
6.4 第三方测试
第三⽅软件测试是指由独⽴的第三⽅公司或组织进⾏的软件测试活动。
通过第三⽅测试,可以确保软件的质量,节省成本,确保软件尽快上线
7. 按照测试地域划分
按照测试地域划分,一般会将测试划分为国际化测试和本地测试。
什么是软件国际化?
简言之,测试人员需要测试软件在不同语言和地区是否能正常工作。
国际化测试需要关注软件的哪些特性:布局、时间、日期、数字、格式、货币、机器型号…
什么是本地测试?
上面的都是本地测试。