Spark Streaming应用程序的集成测试

时间:2017-08-20 11:19:07

标签: sockets apache-spark integration-testing spark-streaming scalatest

我正在尝试为复杂的火花流应用程序编写集成测试,该应用程序具有不同的输入和输出支持。 启动应用程序后,将进行REST调用,该调用将提交包含各种Config参数和组件信息的json。 当我试图将socket的测试用例作为输入和控制台作为输出编写时,我非常困惑,因为我如何测试整个应用程序,即从套接字提交流数据然后比较控制台的输出。 / p>

应用程序通过dataframe.println在控制台上生成输出 什么是进行集成测试的方法?

0 个答案:

没有答案