我使用Drone作为持续集成(CI)服务器。
使用此脚本开始测试:
image: drone/matlab:R2014a
script:
- cd test
- matlab -nodesktop -nosplash -r ci_run_tests
notify:
email:
on_failure: blame
ci_run_tests 函数基于以下答案: https://stackoverflow.com/a/23347768
对于Jenkins,作者建议将测试结果写入* .tap文件,在我看来是这样的:
1..4
ok 1 - test_annotation_to_pitch/test_with_systematic_scale
ok 2 - test_audio_to_pitch/test_120_vs_360
not ok 3 - test_pitch_to_CENS/test_12_vs_36
ok 4 - test_pitch_to_chroma/test_12_vs_36
测试3失败了。 Drone不知道这些信息,因为它不解释那些* .tap文件,它只注册了Matlab正确退出 - 因此说构建本身有效。
我的问题:Drone是否支持某些功能,例如Jenkins中的* .tap文件
谢谢!
答案 0 :(得分:0)
大多数持续集成系统不会解析结果或了解正在使用的测试,但会检查所调用程序的退出状态。
要发出错误信号,程序需要退出0
以外的其他内容。
虽然提到的测试脚本有一个exit(1)
,但是当测试失败时,testrunner
似乎不会引发异常。因此,要检查测试失败,您需要计算它们的数量:
function runAllMyTests
import matlab.unittest.TestSuite;
import matlab.unittest.TestRunner;
import matlab.unittest.plugins.TAPPlugin;
import matlab.unittest.plugins.ToFile;
try
% Create the suite and runner
suite = TestSuite.fromPackage('packageThatContainsTests', 'IncludingSubpackages', true);
runner = TestRunner.withTextOutput;
% Add the TAPPlugin directed to a file in the Jenkins workspace
tapFile = fullfile(getenv('WORKSPACE'), 'testResults.tap');
runner.addPlugin(TAPPlugin.producingOriginalFormat(ToFile(tapFile)));
results = runner.run(suite);
% Count number of failed tests. Exit(1) if greater than 0
if nnz([results.Failed])
exit(1);
end
catch e;
disp(e.getReport);
exit(1);
end;
exit force;
当你考虑它时,那就是你真正想要的行为:异常总是停止执行任何抛出它的东西。因此,您的测试套件会在第一次遇到错误时停止,而不会显示任何其他错误。