OpenResty单元测试实践
作者:spacewander 发布时间:[ 2016/10/25 15:31:41 ] 推荐标签:单元测试 OpenResty 软件测试
无测试,不编码。有持续运行的单元测试,是保持项目健康基本的要求。在多人协作的内部项目中,这一点尤其重要。基于 OpenResty 的项目开发自然不会例外。
测试框架
我们考察过 OpenResty 自己的测试框架 test-nginx,发现该框架偏向于对接口进行测试。把它用作单元测试,犹如用园艺剪裁纸。
以 lua 应用的角度看,busted倒是个合适的单元测试框架。只是 OpenResty 项目代码中难免会用到 OpenResty 的 API。
如果不能在 OpenResty 上下文中运行测试,那么这些 API 无法调用。显然我们不可能把这些 API 都分离出去,或者 mock 掉。
这么做不切实际。
好在 OpenResty 提供了 resty 命令行工具,能够以一次性命令的形式在 OpenResty 上下文运行给定的 lua 代码。
结合 resty 和 busted 两个工具,有一个办法可以在 OpenResty 上下文中运行 busted 的测试代码。
首先,注意要安装 lua5.1 对应的 luarocks。luarocks 默认的 lua 版本是 5.2, 所以安装的时候需要配置一下。如果能够像这样,直接指定使用安装 OpenResty 时附带的 luajit,那更好了:
./configure --with-lua="/usr/" --lua-suffix="jit" --with-lua-include=/usr/local/openresty/luajit/include/luajit-2.1/
然后 sudo luarocks install busted, 安装 busted。
查看命令行工具 busted 的内容,会发现它其实是个启动脚本:
#!/usr/bin/env lua
-- Busted command-line runner
require 'busted.runner'({ standalone = false })
OK,现在让 resty 去执行这个脚本吧!
假设项目结构如下:
..
├── src
│ └── code.lua
└── test
└── test_spec.lua
我们可以这样运行:
resty -I ../src -e 'require "busted.runner"({ standalone = false })' -- --verbose test_spec.lua
解释下,-I 参数后面跟着的是 lua 模块的路径,-e 参数后面跟着的是要执行的代码片段,--
后面是用户参数。所以上面的命令等价于 busted --verbose test_spec.lua。
使用 resty 来运行 lua 代码有一个局限。它会在 ngx.timer 的上下文运行代码,导致许多跟请求上下文相关的 OpenResty API
依然是无法调用的。举个例子,如果待测试代码里面调用了 ngx.location.capture,执行测试会得到这样的结果:
Error → test_spec.lua @ 7
topic feature
test_spec.lua:15: API disabled in the current context
不过这已足矣,毕竟我们是在做单元测试而非接口测试。像是请求上下文的东西,应该在测试时 mock 掉。至于怎么 mock,这属于busted 的范畴,请参考 busted 的文档。
测试覆盖
有了测试,下面的需求是统计测试的覆盖。
假若有具体的测试覆盖程度,程序员们可以针对性地编写测试,对哪些地方缺乏测试也心知肚明。
另外,还可以求出项目的测试覆盖率。
测试覆盖率不仅仅能够衡量项目的健康程度。覆盖率的增增减减,会激励程序员们尽可能地多写测试。
谁会愿意看着自己新增的代码一片红色(无测试覆盖)?自然而然的,如果每次提交的时候,可以及时获得测试覆盖的反馈,便能保持一个较高的覆盖率。
在 lua 中有一个库 luacov ,可以实现这样的功能。
在测试运行时加入 luacov ,它会在每一行加入钩子函数,触发对测试覆盖的统计。luacov 会把统计到的覆盖率报告在
luacov.stats.out 文件中。
busted已经内置了 luacov 支持,所以我们要操心的事情少很多。
需要往前面的 busted 命令添加 --coverage 选项:
resty -I ../src -e 'require "busted.runner"({ standalone = false })' -- --coverage --verbose test_spec.lua
为了让 luacov 能够写出覆盖报告,还需要在 .luacov 下配置:
tick = true
如果不这么做,我们没办法获取测试覆盖结果了。因为 luacov 默认只在程序退出时才写入覆盖报告,而我们的 openresty
是作为后台程序运行的。设置了 tick = true 后,luacov 会定期更新覆盖报告。除了 tick,你还可以在 .luacov
中设置许多 luacov 相关的配置:
http://keplerproject.github.i...
现在已经有了份 luacov.stats.out 了,它长这样:
127:/usr/local/share/lua/5.1/busted/init.lua
0 0 0 0 4 8 4 0 4 4 0 0 10 20 10 0 10 10 0 0 36 36 0 72 0 0 0 0 36 0 36 36 36 0 36 0 36 36 72 72 36 0 0 0 0 0 0 72 0 0 36 36 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0
0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 92
49:/usr/local/share/lua/5.1/busted/languages/en.lua
1 0 1 0 0 1 1 1 1 0 1 1 1 1 0 1 1 1 1 0 1 1 1 1 0 1 0 1 0 0 1 1 0 0 0 0 0 0 0 0 1 1 0 0 0 0 0 1 1
23:/usr/local/share/lua/5.1/busted/modules/files/lua.lua
1 0 1 0 0 50 100 50 1 0 0 8 1 0 0 4 4 0 0 4 1 0 1
107:/usr/local/share/lua/5.1/busted/modules/files/moonscript.lua
1 0 2 1 1 0 1 0 0 0 0 0 0 0 0 0 0 1 0 0 0 0 0 0 0 0 0 0 0 0 1 0 0 0 0 0 1 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 1 0 1 0 0 0 0 0 0 0 0 0 0 0 1 0 0 0
0 0 0 0 0 0 0 0 1 0 0 0 1 0 0 0 0 0 0 0 1 0 1
...
显然,这一份不是人类可读的版本。
接着运行 luacov YOUR_SRC_DIR 可以生成出 luacov.report.out 。
这一份是终的测试覆盖率报告:
...
****0 for c, v in pairs(colorvalues) do
****0 colors[c] = makecolor(v)
end
****0 return colors
==============================================================================
Summary
==============================================================================
File Hits Missed Coverage
...
当然这一份也不怎么“对人类友好”。如果嫌 luacov 默认生成的报告太粗糙,可以使用第三方的 reporter:
https://github.com/keplerproj...
或者,自己动手,丰衣足食:造一个 reporter 轮子。
这方面没有什么文档,只能去读luacov 默认的 reporter 实现
另外一个思路是,写个脚本去解析生成的 luacov.report.out 测试报告,去生成更加可视化的版本(或者跟现有的 CI 平台对接)。
相关推荐
更新发布
功能测试和接口测试的区别
2023/3/23 14:23:39如何写好测试用例文档
2023/3/22 16:17:39常用的选择回归测试的方式有哪些?
2022/6/14 16:14:27测试流程中需要重点把关几个过程?
2021/10/18 15:37:44性能测试的七种方法
2021/9/17 15:19:29全链路压测优化思路
2021/9/14 15:42:25性能测试流程浅谈
2021/5/28 17:25:47常见的APP性能测试指标
2021/5/8 17:01:11