草庐IT

逆天啦！一键执行混沌测试，服务会挂的，需要跑路吗？在线等！

itest 最懂测试人的开源测试管理软件新秀 2023-04-24 原文

一大早来公司老板给小T安排做一个系统的业务场景稳定性测试，我一脸蒙呀，老板解释到：就是让我一顿乱整，看看系统会不会挂掉，天下还有这等好事儿？哈哈，我和老板说，我有办法了，搞死系统可别怪我呀，老板发话了：测试环境搞死也没事，主要是要测试出系统的健壮性！

话是说出了口，但实际真的很容易吗？急得小T是左右为男（难）又满头大汉（汗），没办法找到了Chatgpt一顿操作猛如虎，哈哈，Chatgpt 提供了一个接口混沌测试，大概思路是以撞库的形式来进行测试接口，原理如下：

 

 

 

配置好混沌规则 ，然后以 “撞库” 的形式排列组合，替换掉正向接口用例中的参数值去执行撞库，瞬间完成接口健壮性测试 “撞库时” 先单独一个一个去换， 然后再排例组合。

好了，现在关键问题来了，小T不会写这种代码耶（哈哈哈哈）！！！不过还有一个很牛的办法，手动操作穷举走起，不过看了一下接口数量：10几个，每个参数也不算少，不穷举，排列组合下来也很多了，小T想了一下大约需要50来个小时而已，OK，系统没挂掉小T先挂了！

同时小T测试的不是单一接口是一个包含一系列接口的业务场景，这不上周一个讲过的：《研发管理你痛过吗？》的推文中提到过接口编排。

 

 

最后还是小C给小T支了招，了解一下Codes的对应功能，小T赶紧进了Codes的技术支持群，技术支持告诉小T，这个小case呀 ，接口场景编排加接口混沌测试可以一步到位 ,真是爽得不要不要的，真担心系统会不会一搞就挂了，先拿告诉我的方案POC一下，之前真是发愁呀，小T就一个小白，按官方给的DEMO POC下来几分钟完事，不信你看看POC过程。

step1：定义好接口场景中的每个接口

听说是可以进行录制可惜小T还不会用，先手动增加登录接口以及POC的场景中其它相关接口。

 

 

step2：设置登录接口断言

小T觉得拖拽式的方式设置断言蛮爽的，当然高级玩家们也可以自己编码实现哦。

 

 

step3：编排业务场景

拖拽式编排接口为业务场景，说实在的不要太爽啦！（小T已晕）

 

 

step4：设置业务场景流转条件

真的就像是工作流一样，双击接口间的连线可以设置流转条件，会把前一个接口的响应结果解析为一个树状结构，拖动树状结构上的节点，如下图所示：

 

 

step5：设置好所有流转逻辑

 

 

step6：下面是最哇塞的功能，自动推导接口间依赖拓扑

 

 

step7：配置混沌规则并在场景中应用

Codes可以配置任意多的混沌规则，小T假定场景中某个接口的参数为M，配置了N个混沌规则，执行场景中每个接口的次数 M+C ab * P aa  （M和N哪个大哪个是a 另一个是B），假定场景中有X个接口那么总执行次数就是希格码 M+C ab * P aa

 

 

 

 

 

step8：运行场景查看调用链

 

 

step9：查看调用情况及混沌日志

查看某次正常执行情况。

 

 

（还好系统在这里居然没挂，30多秒里运行了1800多次）

 

 

小T最后总结一下：

如果做业务场景中的反向测试，不需要手动一个一个去执行，手动操作穷举的方式搞数据驱动也很难搞定，如果参数复杂数据驱动文件也不好配置。所以Codes另辟蹊径，配置反向规则及对应的值，场景中所有接口一起来排列组合，最后排列组合去替换掉正常参数进行测试。还真别说我们有一个内部的MIS系统，一次跑了3000多个组合哈哈系统挂了，和老板得意的打了个招呼，我赶紧跑路走人，让研发去排查去！
逆天啦stylespanmargin-bottom软件测试

有关逆天啦！一键执行混沌测试，服务会挂的，需要跑路吗？在线等！的更多相关文章

  1. ruby-on-rails - 使用 Ruby on Rails 进行自动化测试 - 最佳实践 - 2

    很好奇，就使用ruby​​onrails自动化单元测试而言，你们正在做什么？您是否创建了一个脚本来在cron中运行rake作业并将结果邮寄给您？git中的预提交Hook？只是手动调用？我完全理解测试，但想知道在错误发生之前捕获错误的最佳实践是什么。让我们理所当然地认为测试本身是完美无缺的，并且可以正常工作。下一步是什么以确保他们在正确的时间将可能有害的结果传达给您？ 最佳答案 不确定您到底想听什么，但是有几个级别的自动代码库控制:在处理某项功能时，您可以使用类似autotest的内容获得关于哪些有效，哪些无效的即时反馈。要确保您的提

  2. ruby - 使用 ruby​​ 和 savon 的 SOAP 服务 - 2

    我正在尝试使用ruby​​和Savon来使用网络服务。测试服务为http://www.webservicex.net/WS/WSDetails.aspx?WSID=9&CATID=2require'rubygems'require'savon'client=Savon::Client.new"http://www.webservicex.net/stockquote.asmx?WSDL"client.get_quotedo|soap|soap.body={:symbol=>"AAPL"}end返回SOAP异常。检查soap信封，在我看来soap请求没有正确的命名空间。任何人都可以建议我

  3. ruby-openid:执行发现时未设置@socket - 2

    我在使用omniauth/openid时遇到了一些麻烦。在尝试进行身份验证时，我在日志中发现了这一点:OpenID::FetchingError:Errorfetchinghttps://www.google.com/accounts/o8/.well-known/host-meta?hd=profiles.google.com%2Fmy_username:undefinedmethod`io'fornil:NilClass重要的是undefinedmethodio'fornil:NilClass来自openid/fetchers.rb，在下面的代码片段中:moduleNetclass

  4. ruby - 具有身份验证的私有(private) Ruby Gem 服务器 - 2

    我想安装一个带有一些身份验证的私有(private)Rubygem服务器。我希望能够使用公共(public)Ubuntu服务器托管内部gem。我读到了http://docs.rubygems.org/read/chapter/18.但是那个没有身份验证-如我所见。然后我读到了https://github.com/cwninja/geminabox.但是当我使用基本身份验证(他们在他们的Wiki中有)时，它会提示从我的服务器获取源。所以。如何制作带有身份验证的私有(private)Rubygem服务器？这是不可能的吗？谢谢。编辑:Geminabox问题。我尝试“捆绑”以安装新的gem..

  5. ruby - 使用 C 扩展开发 ruby​​gem 时，如何使用 Rspec 在本地进行测试？ - 2

    我正在编写一个包含C扩展的gem。通常当我写一个gem时，我会遵循TDD的过程，我会写一个失败的规范，然后处理代码直到它通过，等等......在“ext/mygem/mygem.c”中我的C扩展和在gemspec的“扩展”中配置的有效extconf.rb，如何运行我的规范并仍然加载我的C扩展？当我更改C代码时，我需要采取哪些步骤来重新编译代码？这可能是个愚蠢的问题，但是从我的gem的开发源代码树中输入“bundleinstall”不会构建任何native扩展。当我手动运行rubyext/mygem/extconf.rb时，我确实得到了一个Makefile(在整个项目的根目录中)，然后当

  6. ruby - Ruby 的 Hash 在比较键时使用哪种相等性测试？ - 2

    我有一个围绕一些对象的包装类，我想将这些对象用作散列中的键。包装对象和解包装对象应映射到相同的键。一个简单的例子是这样的:classAattr_reader:xdefinitialize(inner)@inner=innerenddefx;@inner.x;enddef==(other)@inner.x==other.xendenda=A.new(o)#oisjustanyobjectthatallowso.xb=A.new(o)h={a=>5}ph[a]#5ph[b]#nil,shouldbe5ph[o]#nil,shouldbe5我试过==、===、eq?并散列所有无济于事。

  7. ruby - RSpec - 使用测试替身作为 block 参数 - 2

    我有一些Ruby代码，如下所示:Something.createdo|x|x.foo=barend我想编写一个测试，它使用double代替block参数x，这样我就可以调用:x_double.should_receive(:foo).with("whatever").这可能吗？ 最佳答案 specify'something'dox=doublex.should_receive(:foo=).with("whatever")Something.should_receive(:create).and_yield(x)#callthere

  8. ruby - Chef 执行非顺序配方 - 2

    我遵循了教程http://gettingstartedwithchef.com/,第1章。我的运行list是"run_list":["recipe[apt]","recipe[phpap]"]我的phpapRecipe默认Recipeinclude_recipe"apache2"include_recipe"build-essential"include_recipe"openssl"include_recipe"mysql::client"include_recipe"mysql::server"include_recipe"php"include_recipe"php::modul

  9. ruby - Sinatra:运行 rspec 测试时记录噪音 - 2

    Sinatra新手；我正在运行一些rspec测试，但在日志中收到了一堆不需要的噪音。如何消除日志中过多的噪音？我仔细检查了环境是否设置为:test，这意味着记录器级别应设置为WARN而不是DEBUG。spec_helper:require"./app"require"sinatra"require"rspec"require"rack/test"require"database_cleaner"require"factory_girl"set:environment,:testFactoryGirl.definition_file_paths=%w{./factories./test/

  10. ruby-on-rails - 启动 Rails 服务器时 ImageMagick 的警告 - 2

    最近，当我启动我的Rails服务器时，我收到了一长串警告。虽然它不影响我的应用程序，但我想知道如何解决这些警告。我的估计是imagemagick以某种方式被调用了两次？当我在警告前后检查我的git日志时。我想知道如何解决这个问题。-bcrypt-ruby(3.1.2)-better_errors(1.0.1)+bcrypt(3.1.7)+bcrypt-ruby(3.1.5)-bcrypt(>=3.1.3)+better_errors(1.1.0)bcrypt和imagemagick有关系吗？/Users/rbchris/.rbenv/versions/2.0.0-p247/lib/ru

随机推荐