缺陷分析做得好，bug 寫得少。阿里資深技術專家和你分享如何進行高質量的缺陷分析，總結了 5 個要點，通過缺陷分析消除開發(fā)中的各種盲點，打造一個學習型的團隊。

軟件開發(fā)中的缺陷隱含著極高的價值，但是許多組織都僅僅忍受了缺陷帶來的成本和后果，卻讓價值白白溜掉了。

缺陷的價值是其觸發(fā)的學習和成長的機會。把握缺陷帶來的學習機會，可以快速提高組織的能力，未來的缺陷更少，成本更低，更容易成功。但同時，有效的缺陷分析和跟蹤行動需要有效的方法和相應的組織的支持。

缺陷隱含著極高的價值

最近我們做了一次關于缺陷分析的工作坊。

“發(fā)生缺陷是一件好事嗎?” 在工作坊開始的時候，我這么問參與的同學。

“那當然是一件壞事了?！?/p>

“不管是不是好事，它就在那兒。我覺得無所謂好不好，這是一件正常的事情?！?/p>

“這么說好像也對，但是缺陷很麻煩，我沒法喜歡缺陷?！?/p>

是的，沒有人喜歡缺陷，它消耗研發(fā)成本，影響開發(fā)周期，但同時，缺陷又和軟件開發(fā)如影隨形，無論多少，始終都在。這是為什么呢?

看下面的這張圖：

??

軟件開發(fā)是消除不確定性的過程

軟件開發(fā)和工業(yè)生產完全不同。工業(yè)生產通過消除過程中的各種可變性，能夠逐步逼近零缺陷的目標。所以，六西格瑪方法在工業(yè)生產中非常行之有效。

軟件開發(fā)的過程則恰恰相反。每一次開發(fā)，都是不確定的，我們往往都是在項目臨近結束的時候，對整個項目的各種問題和細節(jié)才變得清晰。在這種假設下，與其追求零缺陷，倒不如說是我們應該追求降低缺陷的影響，比如，在缺陷產生的第一時間(注入時間甚至注入之前)就發(fā)現缺陷——因為這時候缺陷的成本幾乎為零，這也就可以等價為“零缺陷”了吧。

如果說工業(yè)生產中的六西格瑪方法來自于對生產系統(tǒng)的打造，那么，在軟件開發(fā)中，“零缺陷”對應的系統(tǒng)是什么呢?它當然包含軟件研發(fā)的流程和工具，但是，在我看來，最重要的，應該是打造軟件的核心主體——人。通過缺陷分析來持續(xù)學習，才能不浪費缺陷所消耗的成本。

為什么會重復踩坑

有不少團隊是有缺陷原因分析的。我曾經仔細分析過一個團隊的缺陷原因分析，發(fā)現了下面這些缺陷原因的高頻詞：

• 編碼有問題，下次寫代碼的時候想的更仔細一些。
• 代碼評審做的不好。下次代碼評審要充分。
• 業(yè)務場景分析不全面，下次分析的更全面一些。
• ......

我相信，寫下上述原因分析的同學，內心一定是很真誠的，也是真心覺得自己當時代碼寫的不夠好，業(yè)務場景分析的不全面，代碼評審不夠充分。但是，這個分析帶來的行動，卻往往是不可達成的。是真的想的不仔細嗎，還是就是想不到?這次評審做的不好，下次就肯定能做好了嗎?這次場景分析不全，那么怎么才能更全呢?

這種原因分析過于寬泛了，以至于很難產生實際有效的改進行動，下次往往還是會在同樣的地方跌倒——大家只要看一下在既往的原因分析中，有多少次類似的答案?每一次重復，就是一次新的踩坑。

還有一類原因分析，恰恰相反，又過于具體化了，具體化到了沒有學習價值的層面上。例如，這是當時設計的不對，A 服務就不該調用 B 服務，A 服務應該考慮到B服務調用中的異常場景，等等。好吧，缺陷現在已經修復了，A 服務調用 B 服務出現的異常場景已經固化在代碼中了，下一次如果是 C 服務調用 D 服務的異常場景應該怎么辦呢?

最合適的缺陷原因應該基于這樣的標準：這些原因需要形成系統(tǒng)化的可行動的結果。這個標準的檢驗方式是：下一次如果發(fā)生某某場景，我們的應對方案是否有效?

做好缺陷分析的 5 個要點

在實踐中，我們總結了 5 個要點，來最大化出于學習目的的缺陷分析的實踐操作。它們是：

• 及時總結，設置卡點
• 結對分析，小組總結
• 負面清單支持下的全量分析
• 可操作的結果
• 團體學習，機制建設

及時總結，設置卡點

“缺陷分析很重要，但是研發(fā)同學都太忙了，我們兩個月集中做一次怎么樣?”

別那么緊張——及時才是最節(jié)約的方式。要從忙碌中解放出來，每次花 15 分鐘，做一次有效的缺陷分析，時間已經妥妥的啦。

缺陷分析的最好時間是缺陷修復完成的時間。此時記憶最新鮮、也能早收益。如果一個缺陷已經過去了兩個月，那么缺陷分析的成本就變高了，得找回原來的記憶和當時的上下文，這個記憶準確不準確還是另一回事。

怎樣才能保證及時地做，從而保證這些重要而不緊急的事情發(fā)生呢?一個比較有效的方式，是設置流程中的卡點：當缺陷被設定為已修復狀態(tài)、或者設定為已關閉狀態(tài)時，強制把缺陷分析設定為一個流程卡點，這樣就能形成比較好的驅動。

結對分析，小組總結

誰來負責缺陷分析?是讓具體這個缺陷的同學來做，還是召集整個團隊一起?

召集整個團隊來做缺陷分析，有時候代價過于高昂。即使僅僅分析比較后期的線上問題，即使每個缺陷僅僅分析 15 分鐘：100 個缺陷，每個團隊 8 個人，乘積就是 12,000分鐘，合 200 個小時，也是一個驚人的數字，投入產出不成比例。

解決缺陷的同學確實是對這個缺陷理解最好。但是，這會不會形成“單點問題”，降低問題分析的有效性?

我們的方案是：

把結對分析作為制度

讓解決缺陷的同學擔任負責人，搭配上一個小伙伴。結對既形成了知識方面的互補，一定程度上消除了思維盲點，也通過結對形成了更深入的討論，也提前進行結果的“驗收”，提高分析的質量。如果有必要，結對的小組可以自主決定是否引入其他人參與。

團隊定期討論學習

團隊定期對重要的缺陷分析結果進行討論，既是對小組成果的驗收，更有利于在團隊成員間形成傳播，互相學習。

負面清單支持下的全量分析

缺陷分析的目的是提升，所以，重在解決那些“未知的未知”的問題。顯然不是每個缺陷都應該深入分析。但是，如果我們針對每個缺陷都定義它該不該分析，又會導致決策成本過高，而且質量也不可靠。所以，我們的做法是在默認全量的基礎上，使用負面清單進行過濾。凡是負面清單不存在的，都進行缺陷分析。負面清單是團隊級別的。每個團隊都應該維護自己的列表，例如：

• 偶發(fā)問題
• 已經列在改進項中的問題(不斷擴充)

這個事情和淘金有些類似，明確不要什么，能更高效地避免那些真正值得做的事情不被淹沒。事實上，每次缺陷分析都會擴充負面清單的長度，所需的缺陷分析數量將越來越少，問題越來越聚焦，時間也越來越節(jié)省。

可操作的結果

缺陷分析應該產生有價值的洞見，足夠的深度是重點。在如何產生深度洞見方面已經有非常多成熟的方法，最典型的是 5 Whys，此外還有魚骨圖等著名工具可用。為了控制篇幅，本文略去對這些方法的介紹，只通過一個實例來說明在實際的缺陷分析中，我們是如何產生深度洞見的。

某缺陷描述了如下的場景(該實例在不影響問題說明的情況下做了適度抽象)：

用戶持有某個虛擬設備，該設備有一些附屬資源，當用戶刪除設備時，該設備的附屬資源應該被釋放。但是，發(fā)現在一種特殊場景下，這個附屬資源并沒有得到釋放。

代碼如下：

void releaseResources (resoure_id){     
     if (failedOfHardwareResourceRelease(resource_id)){         
         writeLog("resource release failed");     
     } 
 }

下面是關于這個問題的對話：

“原因是什么?”

“我們沒有在需求分析階段考慮到這種釋放不成功的場景?！?/p>

“OK。需求分析是問題，這是一個改進點?！歉匾模鹤詈蟀l(fā)現這個問題的最直接的機會點是哪個時間點?”

“寫代碼的時候?！?/p>

“寫代碼的時候我們注意到這個問題了嗎?”

“注意到了啊，所以寫了 log，但是沒仔細想應該怎么處理。這說明我們對這段代碼的職責定義不清晰?！?/p>

“也許我們可以在編程規(guī)范中加入一條：出現異常場景時不應該只記錄 log，而應該和負責人澄清場景和處理方案。在未來，當出現了僅僅出現寫錯誤 log，但是沒有其他處理的時候，我們就能注意到這一點。”

檢驗分析深度是否足夠，最直接的指標就是產生的結果是否是“可行動的”。如果一個結果是不可行動的，往往意味著深度或者抽象不夠。

團體學習，機制建設

學習型組織并不總是容易建立。除了上述心智模型和操作方法之外，組織機制往往是成功的重點。我們總結了如下幾點：

• 是長期存在的團隊
• 建立持續(xù)學習的心智模型
• 持續(xù)維護和利用本組織的智力資產

這幾點似乎都毋需多言。但是關于智力資產，還是要多強調一下：分析結果最后可能會是流程改進、編程習慣和編程規(guī)范、代碼評審的檢查單、設計能力的提升、引入某些新的工程實踐如實例化需求等，不外乎有兩類：

短期的行動

例如引入實例化需求實踐、 建設自動化測試機制等。對于這類具體行動，要定義責任人和結束日期，并且把它們和管理需求等工作項同等管理起來，確保其發(fā)生。

長期的規(guī)則

這類是需要持續(xù)關注的東西，例如代碼評審的常見問題列表、采納某種設計思想如契約式設計、防御式編程等。對于這類問題，由于需要持續(xù)關注，需要維護它們，并把它們作為團隊資產的一部分。當然了，如果技術上可行，還是要把其中的一部分盡早做成工具，減少記憶負擔，提升可操作性。

這種資產維護的越多，就會發(fā)現未來需要繼續(xù)分析的缺陷越少——當然了，這也是一切資產的共性所在。

總結

現實情況紛繁復雜，統(tǒng)一的方法往往并不存在。但是心智模型和一定的規(guī)律、思路還是存在的。本文聚焦于通過缺陷分析進行學習。

通過適當的方法，它可以在可控的時間投入下，為組織積累寶貴的財富，并且在未來的開發(fā)中得到數倍、數十倍上百倍的回報。忙碌不是理由，在未來少掉一個新 bug，就賺回來了。

通過缺陷分析，我們可以形成如下的產出：

• 建立團隊關于需求分析、軟件設計、編程、測試、運維等方面的共同心智
• 形成常見問題的檢查單
• 采用或者開發(fā)新的工具
• 改進既有流程
• 形成針對特定問題的行動計劃

最最重要的，通過消除各種盲點，我們的能力也就越來越強，開發(fā)也就越來越順暢，距離零缺陷的目標，就越來越近了。