在并行测试的情况下,在TeamCity中混淆Build log

时间:2016-06-17 05:40:53

标签: java multithreading selenium teamcity selenium-grid2

我在Localhost上使用Java,Gradle,TestNG,Selenium Hub和Node并尝试并行运行5个测试,以下是示例代码。

这是基类:

package tests.temp;

import java.net.MalformedURLException;
import java.net.URL;

import org.openqa.selenium.WebDriver;
import org.openqa.selenium.firefox.FirefoxDriver;
import org.openqa.selenium.firefox.FirefoxProfile;
import org.openqa.selenium.remote.DesiredCapabilities;
import org.openqa.selenium.remote.RemoteWebDriver;
import org.testng.annotations.AfterMethod;
import org.testng.annotations.BeforeMethod;

public class TestBase
{

protected ThreadLocal<RemoteWebDriver> threadDriver = null;

@BeforeMethod
public void setUp() throws MalformedURLException {

    threadDriver = new ThreadLocal<RemoteWebDriver>();
    DesiredCapabilities dc = new DesiredCapabilities();
    FirefoxProfile fp = new FirefoxProfile();
    dc.setCapability(FirefoxDriver.PROFILE, fp);
    dc.setBrowserName(DesiredCapabilities.firefox().getBrowserName());
    threadDriver.set(new RemoteWebDriver(new URL("http://localhost:4444/wd/hub"), dc));
}

public WebDriver getDriver() {
    return threadDriver.get();
}

@AfterMethod
public void closeBrowser() {
    getDriver().quit();

}

}

以下是1个测试的示例。除名称和数字外,其他测试相同:

package tests.temp;

import org.openqa.selenium.By;
import org.openqa.selenium.WebElement;
import org.testng.annotations.Test;

public class Test01 extends TestBase
{

@Test
public void testLink()throws Exception
{

    getDriver().get("http://www.yandex.ru");
    WebElement textBox = getDriver().findElement(By.name("text"));
    textBox.sendKeys("First test");
    System.out.println("First test thread-count=\"1\"");

}

}

带有Suite的XML文件,包含所有这5个测试:

<!DOCTYPE suite SYSTEM "http://testng.org/testng-1.0.dtd">
<suite name="Parallel test runs" parallel="tests" thread-count="1">

<test name="Test_01">
    <classes>
        <class name="tests.temp.Test01" ></class>
    </classes>
</test>

 ...

<test name="Test_05">
    <classes>
        <class name="tests.temp.Test05" ></class>
    </classes>
</test>

</suite>

最后一个 - 带有Suite runner的XML文件:

<suite name="Parallel Test Suite">
<suite-files>
    <suite-file path="./testRunner.xml" />
</suite-files>
</suite>

问题是:如果我使用thread-count =“1”TeamCity中的构建日志看起来很好,但测试当然是按顺序运行的。 Complete explanation from Google's developers website

如果thread-count =“2”或任何其他值 - 构建日志看起来很混乱,并且测试计数器值不正确。但在IDEA中 - 一切都很酷而且正确! TeamCity thread = 1

有谁知道如何解决这个问题?

1 个答案:

答案 0 :(得分:1)

如果您报告并行运行的测试,则应指定它们flowId,以便TeamCity了解哪个消息属于哪个测试。没有flowId不仅可以构建日志,而且测试统计信息也是不正确的。没有flowId,即使其他测试报告了此失败,TeamCity也会错误地将测试标记为失败。 至于在构建日志中正确显示并行测试,请参阅TeamCity跟踪器中的请求:https://youtrack.jetbrains.com/issue/TW-8249。请投票支持。