如何使用Maven测试java控制台应用程序？

Question

在构建jar文件之后，这些测试应该运行。 他们应该测试它是否完全运行， 以及是否在给定某些输入文件的情况下生成正确的控制台输出。

您能否指出控制台应用程序的此类测试的一些示例？这些测试必须用Java编写才能与Maven一起使用吗？

有一个类似的问题（Testing console based applications/programs - Java），但我需要的是黑盒测试，而不是单元测试。它没有提到Maven。

---

更新

事实证明，它很容易做到。在看到如此多的定义后，我的第一个问题是对集成测试的误解（What is Unit test, Integration Test, Smoke test, Regression Test?; What's the difference between unit, functional, acceptance, and integration tests?; What are unit testing and integration testing, and what other types of testing should I know about?; What is an integration test exactly?）。第二个问题是我不打算用Java编写这些测试，但最后我必须学习如何使用java.lang.Runtime。

首先，我已将此添加到 pom.xml ：

<plugin>
    <artifactId>maven-failsafe-plugin</artifactId>
    <version>2.6</version>
    <executions>
        <execution>
            <goals>
                <goal>integration-test</goal>
                <goal>verify</goal>
            </goals>
        </execution>
    </executions>
</plugin>

然后我在 src / test / java 中创建了一个 * IT.java 文件：

public class MyAppIT {

    @Test
    public void test() throws IOException {
        Runtime runtime = Runtime.getRuntime();
        String cmd = "java -cp target/myapp.jar my.app.Main";
        Process process = runtime.exec(cmd);
        InputStreamReader isr = new InputStreamReader(process.getErrorStream());
        BufferedReader br = new BufferedReader(isr);
        Boolean containsUsage = false;
        String line;
        while ((line = br.readLine()) != null) {
            if (line.contains("Usage")) {
                containsUsage = true;
            }
        }
        assertTrue(containsUsage);
    }
}

现在我使用 mvn verify 代替 mvn package 。

Results :

Tests run: 1, Failures: 0, Errors: 0, Skipped: 0

Answer 1

您似乎想要进行集成测试。

在许多情况下，应用程序是由Hudson，Travis或sth等持续集成（CI）系统构建的。每次提交到源代码后，此CI编译并运行单元测试。 编译成功后，将触发集成测试项目。

集成测试驻留在一个单独的maven源项目中。您将在src / test / java中创建集成测试类，如正常单元测试。当然，您不会单独测试单个类 - 即单元测试 - 您需要设置系统进行集成测试（连接正确的组件）并执行所需的测试“冒烟测试”。

因此，在您的情况下，您可以创建另一个集成测试项目，并在构建应用程序后执行此项目。您可以创建maven父pom并使用子模块来避免手动集成测试构建。

测试类需要是java并位于src / test / java中，它们看起来像普通的单元测试并且由maven运行。 当然，您可以在该测试中启动非Java程序并断言结果。

控制台应用有一个“主”方法，所以我会在测试中调用main方法。否则你必须运行shell命令或其他东西。 （通过java.lang.Runtime）

测试控制台应用程序没有专长。除非您想测试用户界面 - 用户界面的自动测试并不容易且更加困难，请澄清这是否是您的重点。

Answer 2

我建议将maven-invoker-plugin与exec-maven-plugin结合使用。 Invoker创建一个子项目并运行它，exec插件启动你的JAR。然后调用者验证其输出。

例如，请查看pom.xml项目中的s3auth-relay。模块本身生成一个JAR控制台应用程序，它是一个HTTP守护程序。 pom.xml是maven-invoker-plugin配置的一部分。它启动控制台应用程序并检查它是否正常关闭。为了防止JAR作为守护进程启动，我们使用可选的-d标志。

该示例未显示测试JAR输出的功能，但可以使用maven-invoker-plugin的{​​{3}}机制。