在商家地址專項測試中結(jié)合現(xiàn)有精準測試平臺，以STAR模式介紹精準測試探索與實踐。

1、背景

隨著公司業(yè)務(wù)的不斷迭代發(fā)展，業(yè)務(wù)架構(gòu)越來越復(fù)雜，測試亟需優(yōu)化以下幾個方面：

（1）應(yīng)用隨業(yè)務(wù)發(fā)展在不斷擴展，各個應(yīng)用代碼復(fù)雜度會不斷增加，如何準確、全面判定代碼修改影響范圍會越來越重要；

（2）測試過程中會發(fā)現(xiàn)只是自身應(yīng)用代碼一個修改，會導(dǎo)致對外暴露的接口邏輯發(fā)生很大變動，此時測試人員需要判定出這個對外暴露的接口對上層應(yīng)用到底有多大影響；

（3）業(yè)務(wù)快速迭代導(dǎo)致測試時間不斷壓縮，全量回歸是一個很困難的事情，那么測試范圍需要開發(fā)測試人員根據(jù)代碼和業(yè)務(wù)熟悉程度精確把控，風(fēng)險不可控。

基于上述背景，QA可以將精準測試作為應(yīng)用上線質(zhì)量的參考維度之一，有效輔助日常迭代測試工作，提高測試效率。?

2、任務(wù)

2.1  認清精準測試

精準測試是基于源代碼變更分析，結(jié)合一些分析算法，從而確定改動代碼影響的范圍，設(shè)計測試用例進行針對性測試，一方面可以提升測試效率，另一方面精準測試還可以將測試用例與程序代碼之間的邏輯映射關(guān)系建立起來， 而這個過程則是通過工具去采集測試過程執(zhí)行的代碼邏輯及測試數(shù)據(jù)。這兩個點也正是精準測試的核心：正向追溯和逆向追溯。

所以，要想做好精準測試，核心目標可以總結(jié)為以下兩點：

（1）質(zhì)量的評估不再完全靠個人經(jīng)驗和業(yè)務(wù)熟悉度，而是通過精準的數(shù)據(jù)。在測試資源有限的前提下，將用例精簡到更加有針對性，提高測試效率，有效的減少漏測風(fēng)險。

（2）代碼覆蓋率的可衡量性，提升測試質(zhì)量，同時幫助開發(fā)定位缺陷對應(yīng)的代碼執(zhí)行邏輯，提升缺陷修復(fù)效率。

2.2  了解正向追溯

所謂正向溯源，就是解決開發(fā)處理bug的盲目性、QA測試覆蓋率的可衡量性。通過精準測試可以分析出哪些代碼被覆蓋到，哪些代碼沒有被覆蓋，從而統(tǒng)計測試覆蓋率，通過代碼覆蓋率，找出漏測的地方，可以更精準的進行驗證，減少重復(fù)工作。精準測試的運用是從經(jīng)驗型的主觀判斷向精準的數(shù)據(jù)可視化轉(zhuǎn)變，讓質(zhì)量的把控減少了一些不確定性、不可控性。

在用例執(zhí)行過程中，開發(fā)也可以看到QA執(zhí)行用例的代碼細節(jié)。從而追溯到調(diào)用具體方法與實現(xiàn)類，可直接在代碼級定位測試執(zhí)行的代碼缺陷邏輯，并提供最后運行的時序數(shù)據(jù)。也可以更快地定位缺陷對應(yīng)的代碼執(zhí)行邏輯，幫助開發(fā)人員快速修復(fù)缺陷，可追蹤難復(fù)現(xiàn)缺陷。

2.3  了解逆向追溯

所謂逆向追溯，就是解決QA要測什么的問題，實現(xiàn)了代碼變更的影響面評估，分析識別增量與變更代碼。QA通過精準測試對影響的代碼做準確的針對性測試，回歸的范圍更準確，避免了全量回歸造成測試資源的浪費，既保證了質(zhì)量又縮短了版本的迭代周期。

在日常的迭代回歸測試中極大減少回歸測試的盲目性和工作量，釋放人力成本，將更多的時間和成本投入到更深更復(fù)雜的測試工作中，減少資源浪費。

3、行動

基于精準測試的兩大核心目標，QA可以通過正向溯源和逆向追溯進行精準測試探索。下面就借助精準測試平臺以商家地址專項這個項目進行精準測試實踐。

3.1  了解精準平臺架構(gòu)

3.2  精準平臺接入計劃

3.3  開發(fā)梳理改動接口清單

從開發(fā)梳理的改動清單中，可以看到，本次商家地址涉及的改動的接口包含三個服務(wù)：商家下單鏈路服務(wù)（4個）、商家核心服務(wù)（8個）、商家拆分服務(wù)（10），總的接口數(shù)量為22個。

單從開發(fā)的技術(shù)方案上梳理的涉及接口清單上看，QA無法判斷是否有接口遺漏或者錯誤，按照以往的測試策略，QA只能針對這22個接口進行相應(yīng)的測試。

但是有了精準測試平臺之后，QA可以先針對這三個服務(wù)在提測分支和線上master進行對比，識別出有變動的接口數(shù)量，可以初步確認測試范圍。

3.4  精準平臺拉取接口清單

精準平臺地址：??https://ep.shizhuang-inc.com/precision/center/recommend??

（1）商家下單鏈路服務(wù)

從平臺拉取的結(jié)果來看，當前提測分支feature-address-513_monitor分支跟master分支對比，涉及到4個接口的改動，其中2個接口完成自動化，2個接口沒有相關(guān)自動化。

對比開發(fā)梳理的商家下單鏈路服務(wù)改動接口清單和平臺拉取的接口清單，可以看出商家下單鏈路服務(wù)改動接口以及數(shù)量是完全吻合的，這無疑給了QA莫大的信心。

（2）商家拆分服務(wù)

從平臺拉取的結(jié)果來看，當前提測分支feature-address-513_monitor分支跟master分支對比，涉及到8個接口，4個接口完成自動化，4個接口沒有相關(guān)自動化。

對比開發(fā)梳理的商家拆分服務(wù)改動接口清單和平臺拉取的接口清單，可以看出商家拆分服務(wù)改動接口以及數(shù)量也是完全吻合的，只是存在部分接口沒有自動化覆蓋，需要后期補充對應(yīng)的接口自動化進行覆蓋。

（3）商家核心服務(wù)

從平臺拉取的結(jié)果來看，當前提測分支feature-address-513_monitor分支跟master分支對比，涉及到11個接口，且均沒有相關(guān)自動化。

對比開發(fā)梳理的商家核心服務(wù)改動接口清單和平臺拉取的接口清單，可以看出商家核心服務(wù)改動接口數(shù)量比開發(fā)梳理的接口多一個，并且有一個接口沒在開發(fā)的方案當中，說明該服務(wù)需要進行具體分析。

3.5  具體分析發(fā)現(xiàn)問題

（1）接口遺漏

通過精準平臺確認通過商家用戶id查詢退貨地址接口也存在對應(yīng)的改動，開發(fā)少梳理了一個，并同步開發(fā)在清單中進行補充。

（2）代碼分支合并

商家核心服務(wù)識別出了一個非地址相關(guān)的改動，跟開發(fā)確認之后發(fā)現(xiàn)是因為當前提測分支沒有合并當前線上最新的master分支，導(dǎo)致跑出了非地址相關(guān)的功能數(shù)據(jù)。告知開發(fā)進行對應(yīng)代碼合并之后，QA需要重新部署重新拉取接口再次確認。

（3）接口重載

商家核心服務(wù)有一個重載方法精準平臺沒有識別出這個根據(jù)商家id查詢商家地址的接口，跟開發(fā)進行確認，最終結(jié)論是根據(jù)商家id查詢商家地址的V2接口是重載了以下接口：平臺沒有看到重載的方法名，最終確認重載方法還是原來的方法名，只是在入?yún)⑸献鲄^(qū)分，一個只有商家ID，一個需要傳商家ID、訂單類型、商品ID。最終在精準平臺確認了對應(yīng)的入?yún)^(qū)別，平臺沒有作為兩個接口進行識別。

（4）內(nèi)部調(diào)用方法也被識別

在使用精準平臺進行新增接口拉取的時候，發(fā)現(xiàn)平臺會將一些私有方法識別出來，這些方法是內(nèi)部調(diào)用，沒有注冊，接口測試平臺也看不到對應(yīng)的接口信息，無法覆蓋。

3.6  最終接口確認

（1）商家拆分服務(wù)

本次涉及8個改動接口，并補充缺少的4個接口的自動化之后，正常識別且狀態(tài)正常，說明此服務(wù)接口都正常覆蓋。

（2）商家核心服務(wù)

本次涉及10個接口改動，并補充缺少的接口自動化之后，對應(yīng)接口都能正常識別且狀態(tài)正常，說明此服務(wù)接口都正常覆蓋。

（3）商家下單鏈路服務(wù)

本次涉及4個接口改動，并補充缺少的2個接口自動化之后，對應(yīng)接口都能正常識別且狀態(tài)正常，說明此服務(wù)接口都正常覆蓋。

4、結(jié)果

4.1  各個服務(wù)觸發(fā)自動化結(jié)果

（1）商家拆分服務(wù)

（2）商家核心服務(wù)

（3）商家下單鏈路服務(wù)

5、探索心得

5.1  總結(jié)

（1）借助于精準測試平臺，發(fā)現(xiàn)一個開發(fā)梳理遺漏的接口，有效避免了梳理遺漏導(dǎo)致的測試遺漏，一定程度上規(guī)避了風(fēng)險，是QA從經(jīng)驗型的主觀判斷向精準的數(shù)據(jù)可視化轉(zhuǎn)變。

（2）借助精準平臺識別出一些沒有進行自動化覆蓋的接口，讓QA能針對這些清單進行接口自動化的查缺補漏，從另一層面提升了自動化用例集的完整性。

（3）精準平臺與自動化平臺、測試用例平臺、覆蓋率平臺打通，從正向追溯和逆向追溯兩個核心進行測試，確保數(shù)據(jù)的準確性、完整性，方便QA持續(xù)跟蹤，提高測試效率。

5.2  優(yōu)化

在接入精準測試平臺的過程中，對平臺有了進一步的了解，當然在使用的過程中也發(fā)現(xiàn)一些問題，并給開發(fā)提了相關(guān)建議，從而不斷完善精準測試平臺開發(fā)，也幫助QA更好更高效得完成質(zhì)量保障工作。