草庐IT

关于自动化测试系统的想法

飞翔的老虎 2024-02-28 原文

**

自动测试的个人见解

**
前几天,在世界银行上线的自动化测试平台有些问题,不得不继续加班。
问题是对test case 的存贮导致。因为前期代码是三哥的杰作,本来想将就用他们写的几千行的存储过程,但是问题不断。三哥的特点我想业界都很清楚。而主要的的差异其实对和传统的,其他的自动化测试系统的差异。
这就不得不说到个人对自动化测试的看法。

第一个是,谁是自动化测试用户。

很多人就想到是QA。
从现在的流程来说没错。但是从整体的成本考虑来说未必。有些自动化测试的逻辑很复杂,尤其是金融业务方面。按照传统的模式,QA未必懂业务,而且这样的场景在实际中比比皆是。所有,就形成了,业务—>BA—>测试需求---->QA的流程。众所周知,环节越多,出问题的可能性就越大。而其原因在于,每个环节需要不同的技能。如,BA是桥梁,需要了解业务,沟通和基本技术。QA则倾向编码或者编写测试用例。
那么,如果一个业务能够使用的系统是不是可以减少流程环节?或者一个平台将测试的要素更加贴近实际应用,是不是也可以降低成本?
这样,自动化测试平台不仅仅是QA的技术手段,而且还实现了BA的部分功能。

第二,测试用例的重用性

当BA环节优化后,现有自动化测试平台的一个重要问题就是重用。我用过UFT写了不少自动化测试脚本,但是一旦目标测试系统有些变动,对不起,那些脚本基本要修改。这对一个缺乏软件工程思想的QA来说,颇为麻烦。所以,我记得在纽约和一个大型的测试团队聊天时,他们的测试经理就抱怨,他们写了上万个测试脚本,但是经历的半年还无法实现完整意义上的测试。
这个问题几乎是所有的大型软件公司,在大型软件出厂都会碰到。要不延期,要不匆忙上马。或者QA一天工作25小时。
测试用例的重用问题主要是测试脚本能否灵活应对环境的变化。即,旧脚本如何适应新的系统,新的元素如何不影响现有脚本。
如果做了10年以上的开发,对上面的问题倒是有信心做到。而用严谨度不够的脚本语言,开发经验不做的QA要做到上诉目标就有些勉为其难。一旦测试用例无法重用,自动化测试的成本比人工测试,在前期基本是优化不了多少。甚至有可能更多。比如,做一个金融模块的UI人工测试可能只需要不到5分钟,而这个5分钟,自动化测试脚本甚至连对象都没有导出来。这时候,老板过来问,你们测试怎么样,你说还要2小时或者一天,老板心里一定十万个神兽跑过,还不如人工对吧?

还要加班,暂时搁笔。

有关关于自动化测试系统的想法的更多相关文章

  1. ruby-on-rails - 使用 Ruby on Rails 进行自动化测试 - 最佳实践 - 2

    很好奇,就使用ruby​​onrails自动化单元测试而言,你们正在做什么?您是否创建了一个脚本来在cron中运行rake作业并将结果邮寄给您?git中的预提交Hook?只是手动调用?我完全理解测试,但想知道在错误发生之前捕获错误的最佳实践是什么。让我们理所当然地认为测试本身是完美无缺的,并且可以正常工作。下一步是什么以确保他们在正确的时间将可能有害的结果传达给您? 最佳答案 不确定您到底想听什么,但是有几个级别的自动代码库控制:在处理某项功能时,您可以使用类似autotest的内容获得关于哪些有效,哪些无效的即时反馈。要确保您的提

  2. ruby - 使用 C 扩展开发 ruby​​gem 时,如何使用 Rspec 在本地进行测试? - 2

    我正在编写一个包含C扩展的gem。通常当我写一个gem时,我会遵循TDD的过程,我会写一个失败的规范,然后处理代码直到它通过,等等......在“ext/mygem/mygem.c”中我的C扩展和在gemspec的“扩展”中配置的有效extconf.rb,如何运行我的规范并仍然加载我的C扩展?当我更改C代码时,我需要采取哪些步骤来重新编译代码?这可能是个愚蠢的问题,但是从我的gem的开发源代码树中输入“bundleinstall”不会构建任何native扩展。当我手动运行rubyext/mygem/extconf.rb时,我确实得到了一个Makefile(在整个项目的根目录中),然后当

  3. ruby - Ruby 的 Hash 在比较键时使用哪种相等性测试? - 2

    我有一个围绕一些对象的包装类,我想将这些对象用作散列中的键。包装对象和解包装对象应映射到相同的键。一个简单的例子是这样的:classAattr_reader:xdefinitialize(inner)@inner=innerenddefx;@inner.x;enddef==(other)@inner.x==other.xendenda=A.new(o)#oisjustanyobjectthatallowso.xb=A.new(o)h={a=>5}ph[a]#5ph[b]#nil,shouldbe5ph[o]#nil,shouldbe5我试过==、===、eq?并散列所有无济于事。

  4. ruby - RSpec - 使用测试替身作为 block 参数 - 2

    我有一些Ruby代码,如下所示:Something.createdo|x|x.foo=barend我想编写一个测试,它使用double代替block参数x,这样我就可以调用:x_double.should_receive(:foo).with("whatever").这可能吗? 最佳答案 specify'something'dox=doublex.should_receive(:foo=).with("whatever")Something.should_receive(:create).and_yield(x)#callthere

  5. ruby - Sinatra:运行 rspec 测试时记录噪音 - 2

    Sinatra新手;我正在运行一些rspec测试,但在日志中收到了一堆不需要的噪音。如何消除日志中过多的噪音?我仔细检查了环境是否设置为:test,这意味着记录器级别应设置为WARN而不是DEBUG。spec_helper:require"./app"require"sinatra"require"rspec"require"rack/test"require"database_cleaner"require"factory_girl"set:environment,:testFactoryGirl.definition_file_paths=%w{./factories./test/

  6. ruby-on-rails - 迷你测试错误 : "NameError: uninitialized constant" - 2

    我遵循MichaelHartl的“RubyonRails教程:学习Web开发”,并创建了检查用户名和电子邮件长度有效性的测试(名称最多50个字符,电子邮件最多255个字符)。test/helpers/application_helper_test.rb的内容是:require'test_helper'classApplicationHelperTest在运行bundleexecraketest时,所有测试都通过了,但我看到以下消息在最后被标记为错误:ERROR["test_full_title_helper",ApplicationHelperTest,1.820016791]test

  7. ruby - RuntimeError(自动加载常量 Apps 多线程时检测到循环依赖 - 2

    我收到这个错误:RuntimeError(自动加载常量Apps时检测到循环依赖当我使用多线程时。下面是我的代码。为什么会这样?我尝试多线程的原因是因为我正在编写一个HTML抓取应用程序。对Nokogiri::HTML(open())的调用是一个同步阻塞调用,需要1秒才能返回,我有100,000多个页面要访问,所以我试图运行多个线程来解决这个问题。有更好的方法吗?classToolsController0)app.website=array.join(',')putsapp.websiteelseapp.website="NONE"endapp.saveapps=Apps.order("

  8. ruby - 即使失败也继续进行多主机测试 - 2

    我已经构建了一些serverspec代码来在多个主机上运行一组测试。问题是当任何测试失败时,测试会在当前主机停止。即使测试失败,我也希望它继续在所有主机上运行。Rakefile:namespace:specdotask:all=>hosts.map{|h|'spec:'+h.split('.')[0]}hosts.eachdo|host|begindesc"Runserverspecto#{host}"RSpec::Core::RakeTask.new(host)do|t|ENV['TARGET_HOST']=hostt.pattern="spec/cfengine3/*_spec.r

  9. ruby-on-rails - 如何使辅助方法在 Rails 集成测试中可用? - 2

    我在app/helpers/sessions_helper.rb中有一个帮助程序文件,其中包含一个方法my_preference,它返回当前登录用户的首选项。我想在集成测试中访问该方法。例如,这样我就可以在测试中使用getuser_path(my_preference)。在其他帖子中,我读到这可以通过在测试文件中包含requiresessions_helper来实现,但我仍然收到错误NameError:undefinedlocalvariableormethod'my_preference'.我做错了什么?require'test_helper'require'sessions_hel

  10. ruby-on-rails - Cucumber 是否只是 rspec 的包装器以帮助将测试组织成功能? - 2

    只是想确保我理解了事情。据我目前收集到的信息,Cucumber只是一个“包装器”,或者是一种通过将事物分类为功能和步骤来组织测试的好方法,其中实际的单元测试处于步骤阶段。它允许您根据事物的工作方式组织您的测试。对吗? 最佳答案 有点。它是一种组织测试的方式,但不仅如此。它的行为就像最初的Rails集成测试一样,但更易于使用。这里最大的好处是您的session在整个Scenario中保持透明。关于Cucumber的另一件事是您(应该)从使用您的代码的浏览器或客户端的角度进行测试。如果您愿意,您可以使用步骤来构建对象和设置状态,但通常您

随机推荐