learn-tech/专栏/Go语言核心36讲/24测试的基本规则和流程(下).md
2024-10-16 00:01:16 +08:00

11 KiB
Raw Blame History

                        因收到Google相关通知网站将会择期关闭。相关通知内容
                        
                        
                        24 测试的基本规则和流程(下)
                        你好,我是郝林。今天我分享的主题是测试的基本规则和流程的(下)篇。

Go语言是一门很重视程序测试的编程语言所以在上一篇中我与你再三强调了程序测试的重要性同时也介绍了关于go test命令的基本规则和主要流程的内容。今天我们继续分享测试的基本规则和流程。本篇代码和指令较多你可以点击文章查看原文。

知识扩展

问题 1怎样解释功能测试的测试结果

我们先来看下面的测试命令和结果:

$ go test puzzlers/article20/q2 ok puzzlers/article20/q2 0.008s

以$符号开头表明此行展现的是我输入的命令。在这里我输入了go test puzzlers/article20/q2这表示我想对导入路径为puzzlers/article20/q2的代码包进行测试。代码下面一行就是此次测试的简要结果。

这个简要结果有三块内容。最左边的ok表示此次测试成功也就是说没有发现测试结果不如预期的情况。

当然了这里全由我们编写的测试代码决定我们总是认定测试代码本身没有Bug并且忠诚地落实了我们的测试意图。在测试结果的中间显示的是被测代码包的导入路径。

而在最右边展现的是此次对该代码包的测试所耗费的时间这里显示的0.008s即8毫秒。不过当我们紧接着第二次运行这个命令的时候输出的测试结果会略有不同如下所示

$ go test puzzlers/article20/q2 ok puzzlers/article20/q2 (cached)

可以看到,结果最右边的不再是测试耗时,而是(cached)。这表明由于测试代码与被测代码都没有任何变动所以go test命令直接把之前缓存测试成功的结果打印出来了。

go命令通常会缓存程序构建的结果以便在将来的构建中重用。我们可以通过运行go env GOCACHE命令来查看缓存目录的路径。缓存的数据总是能够正确地反映出当时的各种源码文件、构建环境、编译器选项等等的真实情况。

一旦有任何变动缓存数据就会失效go命令就会再次真正地执行操作。所以我们并不用担心打印出的缓存数据不是实时的结果。go命令会定期地删除最近未使用的缓存数据但是如果你想手动删除所有的缓存数据运行一下go clean -cache命令就好了。

对于测试成功的结果go命令也是会缓存的。运行go clean -testcache将会删除所有的测试结果缓存。不过这样做肯定不会删除任何构建结果缓存。

此外设置环境变量GODEBUG的值也可以稍稍地改变go命令的缓存行为。比如设置值为gocacheverify=1将会导致go命令绕过任何的缓存数据而真正地执行操作并重新生成所有结果然后再去检查新的结果与现有的缓存数据是否一致。

总之我们并不用在意缓存数据的存在因为它们肯定不会妨碍go test命令打印正确的测试结果。

你可能会问如果测试失败命令打印的结果将会是怎样的如果功能测试函数的那个唯一参数被命名为t那么当我们在其中调用t.Fail方法时虽然当前的测试函数会继续执行下去但是结果会显示该测试失败。如下所示

$ go test puzzlers/article20/q2 --- FAIL: TestFail (0.00s) demo53_test.go:49: Failed. FAIL FAIL puzzlers/article20/q2 0.007s

我们运行的命令与之前是相同的但是我新增了一个功能测试函数TestFail并在其中调用了t.Fail方法。测试结果显示对被测代码包的测试由于TestFail函数的测试失败而宣告失败。

注意对于失败测试的结果go test命令并不会进行缓存所以这种情况下的每次测试都会产生全新的结果。另外如果测试失败了那么go test命令将会导致失败的测试函数中的常规测试日志一并被打印出来。

在这里的测试结果中之所以显示了“demo53_test.go:49: Failed.”这一行是因为我在TestFail函数中的调用表达式t.Fail()的下边编写了代码t.Log("Failed.")。

t.Log方法以及t.Logf方法的作用就是打印常规的测试日志只不过当测试成功的时候go test命令就不会打印这类日志了。如果你想在测试结果中看到所有的常规测试日志那么可以在运行go test命令的时候加入标记-v。

若我们想让某个测试函数在执行的过程中立即失败则可以在该函数中调用t.FailNow方法。

我在下面把TestFail函数中的t.Fail()改为t.FailNow()。

与t.Fail()不同在t.FailNow()执行之后,当前函数会立即终止执行。换句话说,该行代码之后的所有代码都会失去执行机会。在这样修改之后,我再次运行上面的命令,得到的结果如下:

--- FAIL: TestFail (0.00s) FAIL FAIL puzzlers/article20/q2 0.008s

显然,之前显示在结果中的常规测试日志并没有出现在这里。

顺便说一下如果你想在测试失败的同时打印失败测试日志那么可以直接调用t.Error方法或者t.Errorf方法。

前者相当于t.Log方法和t.Fail方法的连续调用而后者也与之类似只不过它相当于先调用了t.Logf方法。

除此之外还有t.Fatal方法和t.Fatalf方法它们的作用是在打印失败错误日志之后立即终止当前测试函数的执行并宣告测试失败。更具体地说这相当于它们在最后都调用了t.FailNow方法。

好了,到此为止,你是不是已经会解读功能测试的测试结果了呢?

问题 2怎样解释性能测试的测试结果

性能测试与功能测试的结果格式有很多相似的地方。我们在这里仅关注前者的特殊之处。请看下面的打印结果。

go test -bench=. -run=^ puzzlers/article20/q3 goos: darwin goarch: amd64 pkg: puzzlers/article20/q3 BenchmarkGetPrimes-8 500000 2314 ns/op PASS ok puzzlers/article20/q3 1.192s

我在运行go test命令的时候加了两个标记。第一个标记及其值为-bench=.,只有有了这个标记,命令才会进行性能测试。该标记的值.表明需要执行任意名称的性能测试函数当然了函数名称还是要符合Go程序测试的基本规则的。

第二个标记及其值是-run=^$,这个标记用于表明需要执行哪些功能测试函数,这同样也是以函数名称为依据的。该标记的值^$意味着:只执行名称为空的功能测试函数,换句话说,不执行任何功能测试函数。

你可能已经看出来了这两个标记的值都是正则表达式。实际上它们只能以正则表达式为值。此外如果运行go test命令的时候不加-run标记那么就会使它执行被测代码包中的所有功能测试函数。

再来看测试结果重点说一下倒数第三行的内容。BenchmarkGetPrimes-8被称为单个性能测试的名称它表示命令执行了性能测试函数BenchmarkGetPrimes并且当时所用的最大P数量为8。

最大P数量相当于可以同时运行goroutine的逻辑CPU的最大个数。这里的逻辑CPU也可以被称为CPU核心但它并不等同于计算机中真正的CPU核心只是Go语言运行时系统内部的一个概念代表着它同时运行goroutine的能力。

顺便说一句一台计算机的CPU核心的个数意味着它能在同一时刻执行多少条程序指令代表着它并行处理程序指令的能力。

我们可以通过调用 runtime.GOMAXPROCS函数改变最大P数量也可以在运行go test命令时加入标记-cpu来设置一个最大P数量的列表以供命令在多次测试时使用。

至于怎样使用这个标记以及go test命令执行的测试流程会因此做出怎样的改变我们在下一篇文章中再讨论。

在性能测试名称右边的是go test命令最后一次执行性能测试函数即BenchmarkGetPrimes函数的时候被测函数即GetPrimes函数被执行的实际次数。这是什么意思呢

go test命令在执行性能测试函数的时候会给它一个正整数若该测试函数的唯一参数的名称为b则该正整数就由b.N代表。我们应该在测试函数中配合着编写代码比如

for i := 0; i < b.N; i++ { GetPrimes(1000) }

我在一个会迭代b.N次的循环中调用了GetPrimes函数并给予它参数值1000。go test命令会先尝试把b.N设置为1然后执行测试函数。

如果测试函数的执行时间没有超过上限此上限默认为1秒那么命令就会改大b.N的值然后再次执行测试函数如此往复直到这个时间大于或等于上限为止。

当某次执行的时间大于或等于上限时我们就说这是命令此次对该测试函数的最后一次执行。这时的b.N的值就会被包含在测试结果中也就是上述测试结果中的500000。

我们可以简称该值为执行次数,但要注意,它指的是被测函数的执行次数,而不是性能测试函数的执行次数。

最后再看这个执行次数的右边2314 ns/op表明单次执行GetPrimes函数的平均耗时为2314纳秒。这其实就是通过将最后一次执行测试函数时的执行时间除以被测函数的执行次数而得出的。

(性能测试结果的基本解读)

以上这些,就是对默认情况下的性能测试结果的基本解读。你看明白了吗?

总结

注意对于功能测试和性能测试命令执行测试流程的方式会有些不同。另外一个重要的问题是我们在与go test命令交互时怎样解读它提供给我们的信息。只有解读正确你才能知道测试的成功与否失败的具体原因以及严重程度等等。

除此之外,对于性能测试,你还需要关注命令输出的计算资源使用提示,以及各种性能度量。

这两篇的文章中我们一起学习了不少东西但是其实还不够。我们只是探讨了go test命令以及testing包的基本使用方式。

在下一篇我们还会讨论更高级的内容。这将涉及go test命令的各种标记、testing包的更多API以及更复杂的测试结果。

思考题

在编写示例测试函数的时候,我们怎样指定预期的打印内容?

戳此查看Go语言专栏文章配套详细代码。