測試員進(jìn)階技能:如何有效地利用單元測試報(bào)告?
為什么需要單元測試?
從產(chǎn)品角度而言,常規(guī)的功能測試、系統(tǒng)測試都是站在產(chǎn)品局部或全局功能進(jìn)行測試,能夠很好地與用戶的需要相結(jié)合,但是缺乏了對產(chǎn)品研發(fā)細(xì)節(jié)(特別是代碼細(xì)節(jié)的理解)。
從測試人員角度而言,功能測試和系統(tǒng)測試以及其他性能測試等等對測試人員的全局特性理解能力要求較高,只要測試人員能夠掌握一兩種自動化測試框架基本能夠開展功能、性能自動化測試,但是借助于測試框架進(jìn)行研發(fā)降低了測試人員對代碼的掌握、理解要求。
從開發(fā)人員角度而言,用戶需求往往并不是具體的、全面的,因此基于用戶需求轉(zhuǎn)換成開發(fā)文檔或著針對某個(gè)功能編寫開發(fā)代碼往往也存在著局限性(也即我們常說的bug)。
因此,編寫單元測試可以幫助測試人員更好地理解代碼細(xì)節(jié)、提高代碼開發(fā)能力,也能幫助開發(fā)人員提前辨識代碼中可能存在的bug,提高代碼的容錯(cuò)能力。
如何制定單元測試報(bào)告
良好的單元測試報(bào)告能夠幫助測試人員更好地分析、挖掘潛藏的問題。那么,如何制定單元測試報(bào)告呢,從哪些維度出發(fā)呢?在這里我們主要從測試人員角度出發(fā)來思考這個(gè)問題。
- 首先,我們需要報(bào)告中能夠呈現(xiàn)我們的測試用例數(shù)量和測試結(jié)果(pass或者fail),以及錯(cuò)誤細(xì)節(jié)。
- 其次,從單元測試本身特點(diǎn)出發(fā),我們需要報(bào)告中能夠呈現(xiàn)出針對單元代碼分支、單元方法等的覆蓋率,更好地幫助我們梳理和測試用例設(shè)計(jì)的優(yōu)良。
在此,我們使用surefire-report統(tǒng)計(jì)測試用例數(shù)量和測試結(jié)果,使用jacoco統(tǒng)計(jì)單元測覆蓋率(注:本文默認(rèn)測試用例的執(zhí)行方式是mvn test)。
如何配置 surefire-report 和 jacoco ·surefire-report 配置
配置方法:配置 maven-surefire-plugin 插件,maven-surefire-plugin 是 maven 默認(rèn)的 test
執(zhí)行器,配置方法如下圖所示:
上圖中 testFailureIgnore 表示忽略單元測試中的錯(cuò)誤繼續(xù)構(gòu)建,<include>**/*Test.java</include> :表示任何子目錄下所有命名以 Test 結(jié)尾的 Java 類,<exclude> **/Test*.java </exclude> :表示不執(zhí)行任何子目錄下所有命名以 Test 開頭的Java 類。
執(zhí)行方法:使用 mvn test surefire-report:report 即可,會生成在/target/site/surefire-report.html 測試報(bào)告文檔。如下圖所示:Tests 顯示總用例數(shù);Errors 指的是程序沒有考慮到的情況,例如異常未能捕捉;Failure 指的是預(yù)期的結(jié)果與實(shí)際運(yùn)行單元的結(jié)果不同所導(dǎo)致,常出現(xiàn)在斷言處;Skipped 表示跳過的測試用例數(shù);Success Rate表示用例成功率(=成功用例數(shù)/總用例數(shù));Time 顯示總耗時(shí)。Package List 顯示詳細(xì)的package 下用例執(zhí)行結(jié)果。
·jacoco 配置
配置方法:配置 jacoco-maven-plugin 插件,配置方法如下圖所示,phase 表示插件運(yùn)行的生命周期階段。
執(zhí)行方法:mvn test 執(zhí)行即可。會在/target/site/jacoco/目錄下生成總的覆蓋率報(bào)告index.html 和不同 package 的單元測試覆蓋率報(bào)告../xxx/index.html。此外還有 csv 和 xml格式的單元測試覆蓋率報(bào)告。
如上圖所示為某個(gè) package 的單元測試覆蓋率報(bào)告。紅色進(jìn)度條表未覆蓋,綠色進(jìn)度條表示已覆蓋,Cov 為總體覆蓋率。missed Instructions 表示代碼覆蓋率,Missed Branches表示邏輯分支覆蓋率,Missed Cxty 表示判斷執(zhí)行數(shù),missed Lines 表示代碼行數(shù),Methods表示方法個(gè)數(shù)。