Question

我的量角器套件中有15个规格。我想并行运行这些脚本，并希望从此执行中生成合并的报告。

通过在配置文件中添加标签“ shardTestFiles：true”，我能够并行运行脚本。但是，我无法获得合并报告（仅在报告中获得最后执行的规格的结果）。

我正在寻找在并行执行量角器脚本时生成合并报告的解决方案。

注意：使用茉莉花报告剂生成报告。

Answer 1

您可以使用this报告程序，并提供合并测试结果的选项。例如：

 var Jasmine2HtmlReporter = require('protractor-jasmine2-html-reporter');

    jasmine.getEnv().addReporter(
        new Jasmine2HtmlReporter({
            savePath: 'testReports/',
            screenshotsFolder: 'images',
            takeScreenshotsOnlyOnFailures: true,
            consolidateAll: true,
            consolidate: true,
            cleanDestination: false
        }));

Answer 2

我遵循下面提到的方法来满足我的需求。

我将以下代码保留在配置文件的onPrepare部分中。这将为每个规格生成报告。

onPrepare() {
return new Promise(function (fulfill, reject) {
        browser.getCapabilities().then(function (value) {
          reportName = value.get('webdriver.remote.sessionid') + '_' + value.get('browserName') + '_' + Math.floor(Math.random()*1E16); // eslint-disable-line
          jasmine.getEnv().addReporter(
            new Jasmine2HtmlReporter({
              savePath: 'e2e/Results',
              screenshotsFolder: 'images',
              takeScreenshotsOnlyOnFailures: true,
              consolidate: true,
              consolidateAll: true,
              cleanDestination: false,
              fileName: "my-report.html",
              fileName: "regression-test-report.html",
              fileNamePrefix: reportName,
            })
          );
          fulfill();
        })
      });
    });
},

在afterLaunch部分中保留以下代码，该代码将合并onPrepare部分中生成的所有报告：

afterLaunch: function afterLaunch() {
    var fs = require('fs');
    var output = '';
    fs.readdirSync('e2e/Results/').forEach(function(file){
      if(!(fs.lstatSync('e2e/Results/' + file).isDirectory()))
        output = output + fs.readFileSync('e2e/Results/' + file);
    });
    fs.writeFileSync('e2e/Results/RegressionTestReport.html', output, 'utf8');
  }

完成上述配置后将面临的挑战：通过将上述配置写入配置文件，我能够通过并行执行合并报告。但是，如果我第二次运行脚本，则报告也将对其进行合并（我不想这样做）。一旦执行结束，使标签“ cleanDestination：true”删除每个规范。因此，它不起作用。

我如何解决此挑战？：我正在使用shell脚本在jenkins中运行该脚本。因此，我在执行脚本之前编写了shell命令'rm -fr e2e / Results'来删除报告文件夹。因此，该报告将每次都被删除，并且将以最新的执行情况生成一个新的合并报告。

Answer 3

我尝试将protractor-jasmine2-html-reporter与链接答案中的建议结合使用，但不喜欢输出。我喜欢protractor-html-reporter-2生成的输出，该输出适用于jasmine-reporters生成的xml文件。但这没有任何选择可以处理由多个浏览器实例生成的报告。在找不到理想的解决方案后，我最终在量角器config js文件中执行了以下操作：

// add relevant packages in package.json
'use strict';
const HTMLReport = require('protractor-html-reporter-2');
const jasmineReporters = require('jasmine-reporters');
const moment = require('moment');
const os = require('os');
const xmldoc = require('xmldoc');
...
const DATE_FORMAT = 'YYYYMMDD-HHmmss-SSS'; // use any other format that gives unique timestamp
const reportDir = path.join(__dirname, '../report');
...
exports.config = {
    ...
    framework: 'jasmine',
    capabilities: {
        browserName: 'chrome',
        maxInstances: 2,
        shardTestFiles: true,
    },
    beforeLaunch: async function () {
        // clean up report directory
        fs.emptyDirSync(reportDir);
    }, 
    onPrepare: async function () {
         const NOW = moment().format(DATE_FORMAT);
         const reportName = 'index-' + NOW;
         jasmine.getEnv().addReporter(new jasmineReporters.JUnitXmlReporter({
             consolidateAll: true,
             savePath: reportDir,
             filePrefix: reportName,
         }));
    },
    onComplete: async function () {
        // do something after each instance of browser is closed
    },
    afterLaunch: async function (exitCode) {
        // do something after ALL instances of browser are closed
        await consolidateJasmineXmlReports();
    },
    ...     
},
...
async function consolidateJasmineXmlReports() {
    // there may be better ways to write xml out but this works for me
    const files = fs.readdirSync(reportDir).filter(fn => fn.endsWith('.xml'));
    let disabledSum = 0;
    let errorsSum = 0;
    let failuresSum = 0;
    let testsSum = 0;
    let timeSum = 0;
    const allTestSuiteNodes = [];
    for (const file of files) {
        const pathToXml = reportDir + path.sep + file;
        console.log('Reading xml report file: ' + pathToXml);
        const xml = fs.readFileSync(pathToXml);
        const xmlDoc = new xmldoc.XmlDocument(xml);
        const disabled = parseInt(xmlDoc.attr.disabled);
        const errors = parseInt(xmlDoc.attr.errors);
        const failures = parseInt(xmlDoc.attr.failures);
        const tests = parseInt(xmlDoc.attr.tests);
        const time = parseFloat(xmlDoc.attr.time);
        disabledSum += disabled;
        errorsSum += errors;
        failuresSum += failures;
        testsSum += tests;
        timeSum += time;

        const testSuiteNodes = xmlDoc.childrenNamed('testsuite');
        allTestSuiteNodes.push(testSuiteNodes);
    }

    let startXml = `<?xml version="1.0" encoding="UTF-8" ?>`;
    startXml += `<testsuites disabled="` + disabledSum + `" errors="` + errorsSum + `" failures="` + failuresSum + `" tests="` + testsSum + `" time="` + timeSum + `">`;
    const endXml = '</testsuites>';
    allTestSuiteNodes.push(endXml);
    const finalXml = startXml + allTestSuiteNodes.join('\n');
    fs.writeFileSync(reportDir + path.sep + 'consolidated.xml', finalXml, 'utf8');
        
    const testConfig = {            
        outputPath: reportDir,
        outputFilename: 'consolidated',
        ...
    };

    new HTMLReport().from(reportDir + path.sep + 'consolidated.xml', testConfig);
}

我们使用Jenkins进行测试，并且以上创建的报告在Jenkins中显示良好，并且还可以在Open Blue Ocean Jenkins插件显示的报告中准确显示。

另请参阅：

如何在并行执行量角器测试脚本的同时生成合并报告？

3 个答案: