Question

一方面，我们有自动测试来检查一个特定的示例。另一方面，我们在QuickCheck中进行了基于属性的测试，在该测试中，我们提供了属性，而框架提供了示例，但是我们可能必须解释如何生成示例。

在这两个极端之间的某个地方存在编写单个测试或属性并在多个用户提供的示例上运行它的可能性。 Haskell测试环境中存在哪些实用程序可帮助编写此类参数化测试？

作为一个具体示例，这是在Python的pytest中可能如何完成的操作。我想检查len函数是否为各种输入提供正确的输出。为此，可以编写一个测试来检查某些输入的长度是否符合测试人员的预期，并通过大量输入示例和相应的预期结果对测试进行参数化。

from pytest import mark

param = mark.parametrize

@param('input, expected',
       ((''  ,    0),
        ('a' ,    1),
        ('b' ,    1),
        ('ab',    2),
        ('xx',    3), # deliberate mistake
        ('xyz',   3),
        ('aaabc', 5)
       ))
def test_len(input, expected):
    assert len(input) == expected

哪个会像这样生产ouptut：

len_test.py::test_len[-0] PASSED                      [ 14%]
len_test.py::test_len[a-1] PASSED                     [ 28%]
len_test.py::test_len[b-1] PASSED                     [ 42%]
len_test.py::test_len[ab-2] PASSED                    [ 57%]
len_test.py::test_len[xx-3] FAILED                    [ 71%]  (appears red)
len_test.py::test_len[xyz-3] PASSED                   [ 85%]
len_test.py::test_len[aaabc-5] PASSED                 [100%]

========================= FAILURES ==========================
______________________ test_len[xx-3] _______________________
len_test.py:15: in test_len
    assert len(input) == expected
E   AssertionError: assert 2 == 3
E    +  where 2 = len('xx')
============ 1 failed, 6 passed in 0.04 seconds =============

Haskell中有类似的东西吗？

Answer 1

这里是how I do it with HUnit：

adjustToBusinessHoursReturnsCorrectResult :: [Test]
adjustToBusinessHoursReturnsCorrectResult = do
  (dt, expected) <-
    [
      (zt (2017, 10, 2) (6, 59,  4) 0, zt (2017, 10, 2) (9,  0,  0) 0),
      (zt (2017, 10, 2) (9, 42, 41) 0, zt (2017, 10, 2) (9, 42, 41) 0),
      (zt (2017, 10, 2) (19, 1, 32) 0, zt (2017, 10, 3) (9,  0,  0) 0)
    ]
  let actual = adjustToBusinessHours dt
  return $ ZT expected ~=? ZT actual

我只用do表示法和list monad一起创建HUnit可以执行的测试列表（[Test]）。

我通常inline them，这样他们看起来像这样：

main :: IO ()
main = defaultMain $ hUnitTestToTests $ TestList [
  "adjustToBusinessHours returns correct result" ~: do
    (dt, expected) <-
      [
        (zt (2017, 10, 2) (6, 59,  4) 0, zt (2017, 10, 2) (9,  0,  0) 0),
        (zt (2017, 10, 2) (9, 42, 41) 0, zt (2017, 10, 2) (9, 42, 41) 0),
        (zt (2017, 10, 2) (19, 1, 32) 0, zt (2017, 10, 3) (9,  0,  0) 0)
      ]
    let actual = adjustToBusinessHours dt
    return $ ZT expected ~=? ZT actual

  ,
  "Composed adjust returns correct result" ~: do
    (dt, expected) <-
      [
        (zt (2017, 1, 31) ( 7, 45, 55)   2 , zt (2017, 2, 28) ( 7,  0,  0) 0),
        (zt (2017, 2,  6) (10,  3,  2)   1 , zt (2017, 3,  6) ( 9,  3,  2) 0),
        (zt (2017, 2,  9) ( 4, 20,  0)   0 , zt (2017, 3,  9) ( 9,  0,  0) 0),
        (zt (2017, 2, 12) (16,  2, 11)   0 , zt (2017, 3, 10) (16,  2, 11) 0),
        (zt (2017, 3, 14) (13, 48, 29) (-1), zt (2017, 4, 13) (14, 48, 29) 0)
      ]
    let adjustments =
          reverse [adjustToNextMonth, adjustToBusinessHours, adjustToDutchBankDay, adjustToUtc]
    let adjust = appEndo $ mconcat $ Endo <$> adjustments

    let actual = adjust dt

    return $ ZT expected ~=? ZT actual
  ]

我确定还有其他方法可以实现该目标，但是我喜欢这一方法，因为它不需要任何额外的依赖；它只是利用了语言的功能。

Answer 2

请记住，QuickCheck属性通常只是一个功能。我们可以使用QuickCheck向其提供参数，但是我们也可以自己轻松地为其提供参数。

prop_foo :: Foo -> Bar -> Bool

prop1 = prop_foo (Foo 6) (Bar 9)
prop2 = prop_foo (Foo 9) (Bar 2)
...

此外，QuickCheck允许提供自定义生成器，因此您可以控制测试数据的随机分布，但是我敢肯定，您还可以使用它来生成完全 non -的数据随机方式。

然后是HUnit，我敢肯定您可以在测试数据上fmap使用一个测试子例程来生成一组测试用例。确实，我有时用它来测试解析器（这不是随机测试所能接受的）。我编写了一个函数，该函数接受一个输入字符串和一个预期的解析树，然后构造一个为该输入字符串命名的HUnit测试用例，该用例在该字符串上运行解析器并断言输出与给定的期望匹配。

真的，我想有几种方法可以做到这一点。

（您知道SmallCheck吗？它的功能与QuickCheck基本相同，只是系统地生成输入而不是随机生成输入。因此它将尝试 all 的所有可能输入给定大小，然后再扩展到下一个大小。可能不适合您的用例，但值得了解。）

有没有可以在Haskell中轻松编写参数化测试的实用程序？

2 个答案: