“那些成功的人不會坐在待辦事項清單上 - 他們製定了具有明確定義結果並征服他們的可行計劃。當您知道自己想要什麼，為什麼想要它並了解如何使目標成為現實時，您將成為時間管理的主人並控製局勢。”- 托尼·羅賓斯（Tony Robbins），鼓舞人心的演講者
用托尼·羅賓斯（Tony Robbins）的報價開始有關軟件測試的文章似乎很奇怪。托尼·羅賓斯（Tony Robbins）對軟件測試有什麼了解？可能沒有。但是他確實了解實現成果的一些事情，無論是健身目標，財務目標還是人生目標。他的成功公式幫助了全世界的數百萬。
很明顯，產品團隊給更快地提供質量更快的產品團隊帶來了不斷增加的壓力。好消息是技術的進步軟件測試中的人工智能（AI）加速了組織可以創建自動化測試的速度。但是，僅僅因為您正在更快地創建自動化測試並不一定意味著您正在解決困擾您獨特組織的問題。
以一家物流公司與卡車公司緊密合作以在全球運輸產品。如今，每家公司都在某種程度上都是“數字企業”，這適用於物流和卡車公司。這些組織可能會使用電子數據互換（EDI）相互通知彼此的負載招標，接受或拒絕該招標以及貨運中所在地的狀態更新。這些電子通知中的每一個都有具有特定段和元素的唯一標識符（例如EDI 204、214等）。在每個電子文檔中，數據的質量通常決定接收係統是否接受或拒絕電子傳輸。更重要的是，如果這些EDI交易的數據的完整性不準確，那麼這可能會使兩家公司在運輸延遲中付出深遠的代價。在其中可以開始問題。
盡管許多公司主要關注測試的速度，但其他公司從上遊和下遊係統手中卻有永久的數據質量問題，他們似乎無法解決。通過將像AI這樣的新興技術與久經考驗的技術結合自動數據完整性測試，公司可以同時解決兩個目標。但是，讓我們在如何通過可衡量的業務成果來製定“目標”來更加精確。在Tricentis，我們不僅提供了世界一流的連續測試平台，還將其與轉換工具包這有助於定義結果，創建路線圖並計算投資對預期結果的影響。
“我們無法控製風，但我們可以指導帆。”
效率與有效性
業務是不可預測的，但是為您的員工，流程和工具做好準備，以承受可能發生或不發生的未來颶風是旅程的一部分。實際上，做準備是明智的。為了指導您的帆，我鼓勵您進行規定集思廣益，如何分類質量檢查和測試指標，以及如何優先考慮努力。如果您的重點是軟件交付速度的首先，請將其分為兩個插條：
- 測試效率
- 自動化效率
在測試效率下，首先跟蹤執行時間，然後是執行率，最後測試周期時間。當您獲得“測試腿”時，您可以進一步前往海上，開始跟蹤自動化率，誤報率，測試數據自動化速率和測試維護工作等指標的自動化效率。我們的轉換工具包提供了有關如何跟蹤與速度相關的這些指標的所有詳細信息。除了您的船移動的速度之外，我們還將注意力集中在航行能力的質量上。我們還可以將質量分為兩個插條：
- 測試有效性
- 自動化有效性
有了測試效果，您可以通過多種方式來繪製旅程的時間。一些示例是監視您的通過/失敗率，跟蹤您的需求覆蓋範圍並計算缺陷泄漏率。可以通過分析手動測試執行周期與自動測試周期中發現的錯誤，或者從測試的角度自動化多少實際業務風險來量化自動化效率。
什麼是虛榮心指標？
每個人都喜歡講一個很好的故事，並以數字來加強他們的議程或敘述。將脫口秀與一些令人印象深刻的數字配對，使其更加可信，更真實，更可信，更科學。對於質量保證和測試經理而言，他們對報告每個測試周期中通過的測試數量或發現的大量缺陷量更感興趣。確實，這些數字在未經訓練的眼中看起來可能令人印象深刻，並且肯定表明質量保證團隊的生產力很高，但是“生產力”是否導致了積極的業務成果？還是“忙碌的工作”會產生虛榮心指標，以分散交付管道中某個地方釀造的真正問題？
如果您懷疑正在向您報告虛榮心指標 -問問自己這5個場景，該怎麼辦：
- 如果執行的手冊或自動測試沒有足夠的穩健數據或分支邏輯，該怎麼辦？
- 如果發現的缺陷大部分是微不足道的，化妝品或低嚴重性的呢？
- 如果沒有有效的端到端測試策略，測試過於離散怎麼辦？
- 如果我們在浪費寶貴的數據中心資源和手動勞動的同時過度測試，該怎麼辦？
- 如果指標是…。好吧，煙和鏡子？
如果您的懷疑在這些問題中都準確，那麼您的業務麵臨風險。
優先級和監視質量檢查指標（例如缺陷檢測百分比（DDP）或缺陷泄漏率）將與真實業務成果聯係起來，是否有意義？不僅是從一個子環境到下一個子環境（例如，係統測試到用戶接受測試）的缺陷泄漏率，而且從SAP子生產環境（OX1）到您的生產環境（PX1），客戶和實際最終用戶是用於實現業務成果。
在進一步發展之前，讓我們對虛榮指標獲得第二意見。根據Tableau，虛榮心指標是使您對他人看起來不錯的指標，但不能幫助您理解自己的表現，以告知未來策略。我們在媒體上看到了它，我們與業務領導者看到了它，並且與軟件測試負責人沒有什麼不同。
沒有人願意看起來很糟糕，我們都在嚐試找到自己獨特的方式來增加價值。有時，我們對“價值”的定義對我們的客戶並不重要。就質量保證和測試經理而言，客戶是使用我們負責確保質量的軟件的人。虛榮指標無關緊要。他們關心與業務聯係起來的事件，例如延遲的入站發貨，不匹配的負載招標，不準確的采購訂單數據等等。
采用兩項質量檢查指標報告策略
虛榮心指標在質量檢查指標報告中占有一席之地，但肯定不在榜首。向組織利益相關者，投資者和同事報告的最重要的指標應該與業務成果有明確的聯係。例如，如果組織指令是減少運營費用，則想到兩個非常重要的指標：
- 質量檢查勞動力成本
- 缺陷泄漏率
您應該考慮向您的業務領導者發布兩套指標。第一組指標本質上應該是機密的（由於它們可能包含每小時的承包商和員工率），該指標可以從您的質量保證計劃中計算出辛苦的美元節省。特裏森蒂斯轉換工具包提供烘焙的業務價值計算器，可幫助組織從硬數據點做出自信，戰略性的投資決策。大多數ROI計算器傾向於僅關注成本因素，但是我們的免費使用業務價值計算器除了質量改進和速度提高外，還提供了業務影響因素（包括成本節省）的全麵看法。這將使您為您的測試轉型預算提供有說服力的案例。
通過在投資回報率計算中使用多個因素，您可以更好地支持整個組織中的QA平台擴展。麵對現實，業務領導者和利益相關者擁有不同的業務目標。並非每個人都追求相同的目標。通過多因素計算的多因素方法，您可以更好地解釋反對者，並專注於質量平台如何勝過現狀。
一旦您的指標和報告策略與業務成果直接相關，您的第二個重點應該是生成和報告指標，這些指標表明您的團隊對質量檢查過程的承諾可能會或可能不包含一些虛榮心指標。一些為向業務發送的報告增加的虛榮心指標不一定是一件壞事，但我強烈建議您在與投資者，董事會成員或高級領導層交談時，不要以虛榮指標為領導。盡管您的團隊的承諾受到讚賞，但大多數利益相關者對結果更感興趣 - 而不是上個月執行了多少個測試的“參與獎杯”，或者您的團隊在最後一個測試周期中發現了多少個錯誤。