`
kong_bai
  • 浏览: 136516 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

测试自动化普遍存在的问题

阅读更多

对测试工具能够发挥作用,大家都已经了解并认可了,但是很多引入自动化测试工具的软件公司并没有能够让测试自动化发挥应有的作用,其主要原因有以下几个方面:


1.
不正确的观念或不现实的期望

没有建立一个正确的软件测试自动化的观念,或操之过急,或认为测试自动化可以代替手工测试,或认为测试自动化可以发现大量新缺陷,或不够重视而不愿在初期投入比较大的开支等。多数情况下,对软件测试自动化存在过于乐观的态度、过高的期望,人们都期望通过这种测试自动化的方案能解决目前遇到的所有问题。而同时测试工具的软件厂商自然会强调其工具的优势、有利的或成功的一面,可能对要取得这种成功所要做出持久不懈的努力和困难却只字不提。结果,最初的期望,便得不到实

 

2.缺乏具有良好素质、经验的测试人才

有些软件公司舍得花几十万元去买测试工具软件,但缺乏具有良好素质、经验的测试人才。软件测试自动化并不是简简单单地使用测试工具,还需要有良好的测试流程、全面的测试用例(Test case)等来配合脚本的编写,这就要求测试人员不仅熟悉产品的特性和应用领域、熟悉测试流程,而且很好地掌握测试技术和编程技术

 

3.测试工具本身的问题影响测试的质量
  一般不会对自动测试脚本再做大规模的测试,所以自动测试脚本的质量往往依赖于TA工程师的经验和工作态度,如果自动测试工具不能提供一种机制来保证脚本的的质量,那将直接影响到测试结果的正确性。

       通过自动测试工具测试的Test Case是不需要再进行手工测试的,将自动测试与手工测试有效的结合,并在最终的测试报告中也体现自动测试的结果,是比较正确的做法。

 

4.没有进行有效的、充分的培训

  人员和培训是相辅相成的,如果没有良好的、有效的、充分的培训,测试人员对测试工具了解缺乏深度和广度,从而导致其使用效率低下,应用结果不理想。这种培训是一个长期的过程,不是通过一两次讲课的形式就能达到效果。而且,在实际的使用测试工具的过程中,测试工具的使用者可能还存在着这样那样的问题,这也需要有专人负责解决,否则的话,会严重影响测试工具的使用积极性。


5.
没有考虑到公司的实际情况,盲目引入测试工具
  有一点很明确,不同的测试工具面向不同的测试目的、具有各自的特点和适用范围,所以不是任何一个优秀的测试工具都能适应不同公司的需求。某个公司怀着美好的愿望花了不小的代价引入测试工具,半年一年以后,测试工具却成了摆设。究其原因,就是没有能够考虑公司的现实情况,不切实际地期望测试工具能够改变公司的现状,从而导致了失败。

  例如,国内多数软件公司是针对最终用户进行项目开发--工程性质的软件,而不是产品开发。项目开发周期短,不同的用户需求不一样,而且在整个开发过程中需求和用户界面变动较大,这种情况下就不适合引入黑盒测试软件,因为黑盒测试软件的基本原理是录制/回放(虽然通过修改,形成结构化测试脚本),对于不停变化的需求和界面,可能修改和录制脚本的工作量大大超过测试实施的工作量,运用测试工具不但不能减轻工作量,反而加重了测试人员的负担。这种情况下可以考虑引入白盒测试工具,以提升代码质量。

 

6. 没有形成一个良好的使用测试工具的环境

  建立良好的测试工具应用环境,需要测试流程和管理机制做相适应的变化,也只有这样,测试工具才能真正发挥其作用。例如,对于基于 GUI 录制/回放的自动测试来说,产品界面的改变对脚本的正常运行影响较大。再者,白盒测试工具的一般在单元测试阶段使用,而单元测试在多数公司是由开发人员自己完成,如果没有流程来规范开发人员的行为,在项目进度压力比较大的情况下,开发人员很可能就会有意识地不使用测试工具,来逃避问题。所以,有必要将测试工具的使用在开发和测试的流程中明确起来,如在项目各个里程碑所提交的文档中,必须包含某些测试工具生成的报告,如集成测试时DevPartner工具生成的测试覆盖率报告、Logiscope生成的代码质量报告等。
<!--[if !supportLineBreakNewLine]-->
<!--[endif]-->

7.其它技术问题和组织问题

软件测试自动化所需要的测试脚本其维护量很大,而且软件产品本身代码的改变也需要遵守一定的规则,从而保证良好的测试脚本使用重复性,也就是说测试自动化和软件产品本身不能分离。

其次,提供软件测试工具的第三方厂家,对客户的应用缺乏足够理解,很难提供强有力的技术支持和具体问题的解决能力。也就是说,软件测试工具和被测试对象软件产品或系统的互操作性会存在或多或少问题,加之技术环境的不断变化,所有这些对测试自动化的应用推广和深入,都带来很大的影响。

还有安全性的错觉,如果软件测试工具没有发现被测软件的缺陷,并不能说明软件中不存在问题,可能测试工具本身不够全面的问题或测试的预期结果设置不对。

分享到:
评论

相关推荐

    测试自动化普遍存在的一些问题

    测试自动化普遍存在的一些问题软件测试1.不正确的观念或不现实的期望没有建立一个正确的软件测试自动化的观念,或操之过急,或认为测试自动化可以代替手工测试,或认为测试自动化可以发现大量新缺陷,或不够重视而不...

    软件测试自动化普遍存在的问题

    软件测试自动化普遍存在的问题软件测试引入自动化测试的其主要原因有以下几个方面:1.不正确的观念或不现实的期望没有建立一个正确的软件测试自动化的观念,或操之过急,或认为测试自动化可以代替手工测试,或认为...

    测试自动化普遍存在的问题及原因

    测试自动化普遍存在的问题及原因软件测试很多引入自动化测试工具的软件公司并没有能够让测试自动化发挥应有的作用,其主要原因有以下几个方面:1.不正确的观念或不现实的期望没有建立一个正确的软件测试自动化的观念...

    测试覆盖率

     两种评测都可以手工得到(公式如下所示)或通过测试自动化工具计算得到。 基于需求的测试覆盖  基于需求的测试覆盖在测试生命周期中要评测多次,并在测试生命周期的里程碑处提供测试覆盖的标识(如已计划的、已...

    国际化软件测试技术的实现

    对国际化软件测试的重要性、内容、方法等方面作了深入分析,并就当前普遍采用的国际化软件测试自动化工具存在的弱点进行了剖析,最终以Selenium Pc-Java工具做为解决问题的平台,提出了相应的解决办法,对已有的测试...

    决策者对 AI 算法建议的处理:“自动化偏差”与选择性依从性-研究论文

    在研究 1 中,我们通过探索参与者对教师表现预测的遵守情况来测试自动化偏见,这与其他证据相矛盾,同时比较了两种类型的预测:算法与人类专家。 我们没有找到自动化偏见的证据。 在研究 2 中,我们重复了这些发现...

    【案例分享】北京核心区配电网西电捷通TISec解决方案

    为确保建设后的中低压配电网自动化系统的安全,保障电网安全稳定运行,北京某电力公司经过充分的实地调研、方案论证和模拟测试后,最终决定采用西电捷通的网络层IP安全可信技术(Trust of IP Security,简称TISec)...

    python+unittest失败重新运及用例依赖.docx

    用例失败自动重新运行一直困扰着诸多测试人员,在网上找寻了半天一直也没有找到一个能够完美解决的方案,普遍都存在最后一个用例失败后会再次重新运行整个suite并在报告中显示多个相同的失败用例的情况。笔者为了...

    git-workflow-practice-aishamanoj:GitHub Classroom创建的git-workflow-practice-aishamanoj

    本文揭露了有关软件质量保证工作的一些普遍存在的神话。 我的神话是自动化测试比手动测试更强大。 我经历了可能发生的第一手自动化测试失败; 对于我的实习,我必须编写一个脚本来验证服务器,并且当我们使该过程...

    JavaScript 常见安全漏洞和自动化检测技术

    但遗憾的是,目前开发人员普遍不太关注 JavaScript 代码的安全性。据 IBM X-Force 2011 年中期趋势报告揭示,世界五百强的网站及常见知名网站中有 40% 存在 JavaScript 安全漏洞。本文将结合代码向读者展示常见 ...

    网络安全现状的研究报告(1).docx

    网络优化不断发展,并逐渐朝着智能化和自动化的方向发展和进步,出现了人工智能专家,这就打破了原有的思想,通过智能决策支持系统,可以更加有效地对机制进行运用,针对网络中存在的问题,网络优化人员能够给出合理...

    网络安全现状与技术发展研究.docx

    网络优化不断发展,并逐渐朝着智能化和自动化的方向发展和进步,出现了人工智能专家,这就打破了原有的思想,通过智能决策支持系统,可以更加有效地对机制进行运用,针对网络中存在的问题,网络优化人员能够给出合理...

    网络安全现状的研究报告.docx

    网络优化不断发展,并逐渐朝着智能化和自动化的方向发展和进步,出现了人工智能专家,这就打破了原有的思想,通过智能决策支持系统,可以更加有效地对机制进行运用,针对网络中存在的问题,网络优化人员能够给出合理的解决...

    基于python实现手写痕迹文档图像摩尔纹消除源码+项目运行说明.zip

    2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载使用,也适合小白学习进阶,当然也可作为毕设项目、课程设计、作业、项目初期立项演示等。...

    簇联邦学习改进python实现源码+项目说明+代码注释(提高精度+缓解用户孤立问题).zip

    该资源适合计算机相关专业(如人工智能、通信工程、自动化、软件工程等)的在校学生、老师或者企业员工下载,适合小白学习或者实际项目借鉴参考! 当然也可作为毕业设计、课程设计、课程作业、项目初期立项演示等。...

    Automatic_Zoom_Meeting_Joiner:一个有据可查的Python图形用户界面(GUI)程序,可以自动加入缩放会议。 对于那些一天必须参加多个会议且每次会议具有不同凭据的人员而言,最有用

    这个程序专注于自动化变焦会议,这是当今我们大家普遍拥有的会议。 我们已经知道存在可以自动执行此过程的程序,但是我们的实现方式略有不同,并且最适合那些一天必须参加多个会议且每次会议的凭据均不同的人员。 ...

    软件设计规范

    3、软件调度性能,实时的自动化过程(设备控制和自动测量)和用户交互过程(请求服务过程和干预过程;本地交互和远程交互),程控和网络访问的调度(服务器)。 软件项目的3个部分:(把3个阶段由纵向横过来,进行...

    物联网STM32实现的基于RFID的图书管理系统设计毕业源代码+文档说明

    在如今这个管理依靠计算机的网络时代,管理系统在很多中小企业都普遍存在,小到一个商店的收银系统,依靠计算机进行商店数据的管理,减少了人力成本,提高了工作效率,这也是管理系统的优点之一。就拿书店商店来说...

Global site tag (gtag.js) - Google Analytics