[[399106]]

【51CTO.com快譯】軟件測(cè)試面臨的挑戰(zhàn)被大大低估了，難免沒(méi)有得到重視。即便是看似基礎(chǔ)的應(yīng)用程序，比如常見(jiàn)的移動(dòng)應(yīng)用程序，您也可能采用數(shù)量驚人的測(cè)試方法、演練大量的路徑和條件，并對(duì)大量的設(shè)備配置進(jìn)行測(cè)試。在如今近乎持續(xù)的發(fā)布周期中，確保每次更新都增加價(jià)值，又不干擾用戶體驗(yàn)是一項(xiàng)艱巨的任務(wù)。

對(duì)于大企業(yè)組織而言，尤其困難重重。大規(guī)模環(huán)境下的測(cè)試需兼顧以下方面：

• 復(fù)雜的應(yīng)用程序堆棧，平均涉及900個(gè)應(yīng)用程序。單筆事務(wù)平均涉及82種不同的技術(shù)，從大型機(jī)和舊式自定義應(yīng)用程序到微服務(wù)和云原生應(yīng)用程序，不一而足。
• 根深蒂固的手動(dòng)測(cè)試流程，它們專為瀑布式交付節(jié)奏和外包測(cè)試而設(shè)計(jì)，而不是面向敏捷、DevOps和“一切持續(xù)”模式。
• 要求極高的可靠性。據(jù)IDC聲稱，企業(yè)環(huán)境中一小時(shí)的停機(jī)時(shí)間可能造成50萬(wàn)美元到100萬(wàn)美元的損失。在許多行業(yè)，“快速行動(dòng)時(shí)破壞系統(tǒng)”行不通。

尤其在大企業(yè)環(huán)境，測(cè)試是交付延遲的第一大原因，手動(dòng)測(cè)試仍然很普遍(只有15%是自動(dòng)化測(cè)試)，測(cè)試成本平均耗用IT支出總額的23%到35%。

不過(guò)，許多知名組織找到了克服這些障礙的方法。它們將測(cè)試轉(zhuǎn)化為數(shù)字化轉(zhuǎn)型計(jì)劃的助推器，從而加快交付，并騰出預(yù)算用于創(chuàng)新。

它們的做法有何不同?貴組織相比之下又如何?

引入企業(yè)應(yīng)用程序測(cè)試基準(zhǔn)

為了闡明行業(yè)領(lǐng)導(dǎo)者如何測(cè)試其公司乃至全世界依賴的軟件，Tricentis發(fā)布了首份《全球知名組織如何測(cè)試?》報(bào)告，介紹了全球知名組織在如何進(jìn)行測(cè)試。這些數(shù)據(jù)是通過(guò)與代表多個(gè)團(tuán)隊(duì)的高級(jí)質(zhì)量經(jīng)理和IT主管進(jìn)行一對(duì)一訪談收集而來(lái)的。參與者代表的團(tuán)隊(duì)使用各種注重質(zhì)量保證(QA)的功能測(cè)試自動(dòng)化工具：開(kāi)源及其他商業(yè)工具。開(kāi)發(fā)人員測(cè)試和安全測(cè)試活動(dòng)不在本文探討范圍。

該報(bào)告重點(diǎn)關(guān)注從采訪的100家知名組織收集而來(lái)的數(shù)據(jù)：《財(cái)富》 500強(qiáng)企業(yè)以及美洲、歐洲和亞太地區(qū)的知名政府實(shí)體。這里的所有營(yíng)利性公司的收入不少于50億美元。

考慮到平均團(tuán)隊(duì)規(guī)模和團(tuán)隊(duì)數(shù)量，我們估計(jì)該報(bào)告顯示了這些領(lǐng)先組織中成千上萬(wàn)測(cè)試人員的活動(dòng)。

幾大要點(diǎn)

總的來(lái)看，來(lái)自這些知名組織的結(jié)果顯示了39%的測(cè)試自動(dòng)化，但是誤報(bào)率高、低風(fēng)險(xiǎn)覆蓋率以及異常慢的測(cè)試周期。以下是幾個(gè)具體的要點(diǎn)。

• 缺乏穩(wěn)定性的自動(dòng)化：平均測(cè)試自動(dòng)化率(39%)比較高，但誤報(bào)率也比較高(22%)。對(duì)于缺乏穩(wěn)定做法(比如測(cè)試數(shù)據(jù)管理和服務(wù)虛擬化)的早期測(cè)試自動(dòng)化工作而言，這很常見(jiàn)。
• 測(cè)試與風(fēng)險(xiǎn)不符：需求覆蓋率(63%)高，但風(fēng)險(xiǎn)覆蓋率低(25%)。團(tuán)隊(duì)可能會(huì)為每個(gè)需求分配數(shù)量相同的測(cè)試資源，而不是將精力集中在對(duì)業(yè)務(wù)最重要的功能上。
• 開(kāi)發(fā)和測(cè)試周期不同步：平均測(cè)試周期時(shí)間(23天)非常不適合當(dāng)今快節(jié)奏的開(kāi)發(fā)周期(其中87%早在2018年是兩周或更短)。由于測(cè)試周期這么漫長(zhǎng)，測(cè)試難免落后于開(kāi)發(fā)。
• 質(zhì)量很高(在一些情況下)：報(bào)告的缺陷泄漏率(3.75%)很低，通常<10%被認(rèn)為可以接受，<5%被認(rèn)為很好，<1%則很罕見(jiàn)。然而，只有約10%的受訪者跟蹤了缺陷泄漏，因此總的缺陷泄漏率可能更高。跟蹤該度量指標(biāo)的組織往往擁有更成熟的流程。
• 良好的基礎(chǔ)：組織在掌握測(cè)試成功的基本要素(采用適當(dāng)?shù)慕巧?、建立測(cè)試環(huán)境以及培養(yǎng)協(xié)作文化)等方面取得了長(zhǎng)足的進(jìn)步。
• “一切持續(xù)”還沒(méi)有發(fā)生……很少有組織擁有> 75%的測(cè)試自動(dòng)化率，或者采用諸如服務(wù)虛擬化和測(cè)試數(shù)據(jù)管理之類的穩(wěn)定實(shí)踐。有鑒于此，有限的CI / CD集成不足為奇。但是這一切在組織的優(yōu)先級(jí)列表上處于靠前的位置。
• 最大差距：領(lǐng)導(dǎo)者和落后者之間的最大差距在于，每天執(zhí)行的自動(dòng)化測(cè)試的百分比、風(fēng)險(xiǎn)覆蓋率、泄漏到用戶驗(yàn)收測(cè)試(UAT)的缺陷和測(cè)試周期時(shí)間等方面。
• 主要改進(jìn)目標(biāo)：眾多組織希望在六個(gè)月內(nèi)做出最大短期改進(jìn)的三個(gè)方面是：風(fēng)險(xiǎn)覆蓋率、泄漏到UAT的缺陷、誤報(bào)率和測(cè)試周期時(shí)間。

原文標(biāo)題：How the World’s Top Organizations Test，作者：Cynthia Dunlop

【51CTO譯稿，合作站點(diǎn)轉(zhuǎn)載請(qǐng)注明原文譯者和出處為51CTO.com】