我正在编写一个应用程序的自动化测试,目前有大约150个测试用例。一切运行良好,但随着测试的不断增长,我不断遇到如何组织测试用例的问题。
某些测试将依赖于以前的测试(例如,我已经无法登录,直到我打开了应用程序,在我登录之前我无法执行操作)。在运行时,我目前有一个UI,允许用户选择要运行的测试用例,一旦我有了这个列表,尝试对它们进行排序就变得很棘手。
我觉得为测试案例预定义顺序是不值得的,因为并非每次都会运行所有测试用例,每次添加新测试时我都必须更新此列表。
有自动化测试经验或一般测试的人是否有任何建议?
注意:我尝试在每个测试中添加一个整数标志,然后以这种方式对它们进行排序,但这会导致很多问题,并且每当我添加一个新的测试时,中间发生一些测试必须进行调整(这对150多个测试用例来说是痛苦的。)
修改
我想澄清另一个可能相互依赖的测试示例,而不仅仅是登录或打开应用程序。对于该软件,用户可以在应用程序中上传数据。然后,他们可以下载此数据的报告。显然,如果用户只选择下载'测试,我无能为力。但是,如果用户选择上传'并且'下载',我需要一种方法来确保首先执行上传。
答案 0 :(得分:4)
测试不应该依赖以前的测试来运行。如果您想要运行"登录"该怎么办?仅在没有运行的情况下进行测试"打开应用程序"试验。每个测试都应该有自己的设置,它将为测试自行设置所有内容。如果要测试上载,请测试应用程序是否已成功将文件上载到服务器。如果要测试下载,首先要在测试设置中将文件上传到服务器,然后测试服务器中上传的文件是否可以下载。
测试不应该关心/依赖于他们之前发生的事情,否则您的测试可能会失败,因为您的代码不起作用,但是因为您的测试不起作用。然后你会浪费时间试图找出你的代码失败的原因,当它实际上是失败的测试时。查看testsetup和testclear,每个测试都会设置它需要运行的任何内容,然后一旦完成它就会自动清除,因此每个测试都没有其他测试。