啟發(fā)式測(cè)試策略與設(shè)計(jì)
 

特性二：億級(jí)測(cè)試資產(chǎn)管理，大規(guī)模團(tuán)隊(duì)協(xié)同測(cè)試，保障產(chǎn)品特性不丟失

產(chǎn)品的競(jìng)爭(zhēng)力特性是企業(yè)持續(xù)盈利基業(yè)長(zhǎng)青的基石。為了滿足各行業(yè)客戶日益增長(zhǎng)的需求，企業(yè)的軟件產(chǎn)品特性往往不斷豐富和演進(jìn)，對(duì)應(yīng)的測(cè)試用例資產(chǎn)持續(xù)增多，投入測(cè)試的人數(shù)也隨之增加。如何管理好大規(guī)模測(cè)試資產(chǎn)，如何協(xié)同大規(guī)模測(cè)試團(tuán)隊(duì)，如何保證客戶的價(jià)值特性不丟失、體驗(yàn)不下降，都是企業(yè)產(chǎn)品測(cè)試面臨的關(guān)鍵挑戰(zhàn)。

華為云CodeArts TestPlan提供了測(cè)試用例基線化管理能力，持續(xù)積累和沉淀測(cè)試用例，幫助企業(yè)實(shí)現(xiàn)產(chǎn)品價(jià)值特性的看護(hù)。不管是新增需求或者重構(gòu)架構(gòu)，積累的基線化用例，永遠(yuǎn)是企業(yè)產(chǎn)品持續(xù)獲得客戶認(rèn)可的保障。同時(shí)，TestPlan提供了“產(chǎn)品基線庫(kù)、版本分支、測(cè)試計(jì)劃”三層用例管理和評(píng)估能力，支撐團(tuán)隊(duì)間作業(yè)高效協(xié)同，實(shí)現(xiàn)億級(jí)測(cè)試資產(chǎn)的管理與跨版本復(fù)用，滿足復(fù)雜產(chǎn)品多版本并行研發(fā)交付的場(chǎng)景，測(cè)試資產(chǎn)復(fù)用率提升60%。

TestPlan全量用例基線化管理
 

特性三：內(nèi)置IPD測(cè)試流程與規(guī)范，讓高質(zhì)量從偶然到必然

隨著產(chǎn)品的規(guī)模和復(fù)雜度增加，測(cè)試活動(dòng)的開展也需要有章可循，形成科學(xué)的流程和規(guī)范。以華為公司為例，為保障產(chǎn)品測(cè)試活動(dòng)有序開展，華為在IPD流程中定義了從需求分析階段到版本發(fā)布階段之間的詳細(xì)測(cè)試活動(dòng)和流程，并通過標(biāo)準(zhǔn)化的規(guī)范，持續(xù)保障測(cè)試驗(yàn)證的高質(zhì)量。

華為云CodeArts TestPlan內(nèi)置IPD測(cè)試流程與規(guī)范，從測(cè)試策略、測(cè)試設(shè)計(jì)、測(cè)試管理、測(cè)試執(zhí)行到測(cè)試評(píng)估，全流程融入IPD高質(zhì)量實(shí)踐精髓，并伴隨著華為產(chǎn)品發(fā)展而持續(xù)優(yōu)化演進(jìn)，廣泛應(yīng)用于華為各業(yè)務(wù)線的產(chǎn)品測(cè)試中。

IPD測(cè)試活動(dòng)核心流程圖
 

特性四：全方位測(cè)試質(zhì)量評(píng)估，杜絕盲人摸象

管理學(xué)大師彼得·德魯克說過，沒有度量，就沒有管理。所有商業(yè)產(chǎn)品質(zhì)量管理都不例外。基于成熟的測(cè)試質(zhì)量評(píng)估模型和規(guī)范，對(duì)產(chǎn)品質(zhì)量的科學(xué)、客觀評(píng)估，可以讓產(chǎn)品質(zhì)量可視化、可度量，讓產(chǎn)品發(fā)布前的質(zhì)量評(píng)估不再“盲人摸象”，更利于產(chǎn)品持續(xù)改進(jìn)，“讓質(zhì)量暴露在陽光下”，達(dá)成高質(zhì)量的目標(biāo)。

華為云CodeArts TestPlan提供需求覆蓋率、需求通過率、用例執(zhí)行率、遺留缺陷指數(shù)等10多個(gè)質(zhì)量度量指標(biāo)，支持功能、性能、可靠性等維度的質(zhì)量評(píng)估，測(cè)試評(píng)估周期從天級(jí)縮短到小時(shí)級(jí)。

TestPlan同時(shí)提供了分支和測(cè)試計(jì)劃兩級(jí)的實(shí)時(shí)質(zhì)量報(bào)告，全方位、可視化呈現(xiàn)研發(fā)測(cè)試過程和結(jié)果數(shù)據(jù)。該特性支持產(chǎn)品研發(fā)階段的實(shí)時(shí)質(zhì)量評(píng)估，及時(shí)、高效、準(zhǔn)確地呈現(xiàn)產(chǎn)品質(zhì)量現(xiàn)狀，讓研發(fā)人員實(shí)時(shí)掌控研發(fā)進(jìn)度和風(fēng)險(xiǎn)，讓產(chǎn)品質(zhì)量不再是黑盒，為產(chǎn)品上線提供決策依據(jù)。

全方位多維度的測(cè)試質(zhì)量評(píng)估
 

特性五：建立測(cè)試雙向追溯鏈，以過程可信保障結(jié)果可信

ISO15288測(cè)試規(guī)范定義了通用系統(tǒng)生命周期過程，其中，驗(yàn)證過程與確認(rèn)過程中提出了對(duì)需求、測(cè)試設(shè)計(jì)方案、用例、缺陷等雙向可追溯的要求。在華為內(nèi)部，測(cè)試過程端到端可追溯也成為了明文要求的標(biāo)準(zhǔn)。

可追溯的測(cè)試過程能力，可以使組織和項(xiàng)目實(shí)現(xiàn)測(cè)試過程證據(jù)鏈可視化、及時(shí)監(jiān)控和識(shí)別測(cè)試過程風(fēng)險(xiǎn)，加速跟蹤問題閉環(huán)，有效減少漏測(cè)問題，及時(shí)發(fā)現(xiàn)質(zhì)量風(fēng)險(xiǎn)，是產(chǎn)品高質(zhì)量測(cè)試的必要條件。

華為云CodeArts TestPlan支持建立需求、測(cè)試方案、測(cè)試用例、缺陷等雙向關(guān)聯(lián)，實(shí)現(xiàn)測(cè)試過程可追溯，通過可信的測(cè)試過程，保障結(jié)果可信。

測(cè)試雙向追溯鏈

基于以上五大特性，華為云CodeArts TestPlan可實(shí)現(xiàn)測(cè)試全流程標(biāo)準(zhǔn)化、測(cè)試資產(chǎn)復(fù)用及基線化、測(cè)試端到端過程動(dòng)態(tài)實(shí)時(shí)監(jiān)控，保障測(cè)試過程可信，持續(xù)助力客戶產(chǎn)品高質(zhì)量交付。

截至2022年年底，華為云CodeArts TestPlan已經(jīng)高效支撐華為超過4萬測(cè)試人員的測(cè)試作業(yè)，測(cè)試用例月執(zhí)行超過2億次，月API調(diào)用量超過12億次，累計(jì)管理超過10億測(cè)試用例，覆蓋華為終端、網(wǎng)絡(luò)、云計(jì)算、芯片、汽車等大規(guī)模復(fù)雜業(yè)務(wù)場(chǎng)景。

例如，華為數(shù)通路由器業(yè)務(wù)擁有豐富的產(chǎn)品系列，包括骨干網(wǎng)、城域網(wǎng)、接入網(wǎng)各種場(chǎng)景的組網(wǎng)需求，億級(jí)規(guī)模的軟件代碼驅(qū)動(dòng)各類硬件形態(tài)，構(gòu)筑了路由器業(yè)務(wù)海量的功能特性。這種超大規(guī)模、高復(fù)雜度的產(chǎn)品測(cè)試，需要與之相對(duì)應(yīng)的大規(guī)模測(cè)試團(tuán)隊(duì)。在海量硬件形態(tài)與有限的時(shí)間和資源下，如何高效找準(zhǔn)測(cè)試靶心，確保測(cè)試范圍精準(zhǔn)、無遺漏、無冗余，保證產(chǎn)品的質(zhì)量、可靠性與合規(guī)性，是華為數(shù)通路由器測(cè)試業(yè)務(wù)面臨的挑戰(zhàn)。

華為云CodeArts TestPlan支持海量特性的高效測(cè)試管理，在特性需求開發(fā)的同時(shí)，通過基于需求-場(chǎng)景-測(cè)試點(diǎn)-用例的分級(jí)測(cè)試設(shè)計(jì)方法，將需求逐級(jí)分解生成用例，并分層分級(jí)有序管理，支持用例在不同產(chǎn)品版本間高效復(fù)用及合并。同時(shí)，平臺(tái)提供多維度版本質(zhì)量評(píng)估報(bào)告，及時(shí)準(zhǔn)確反饋測(cè)試結(jié)論，通過需求、方案、用例、結(jié)果、缺陷雙向可追溯的能力，實(shí)現(xiàn)產(chǎn)品測(cè)試過程可管理、可信任。

得益于這些特性，華為云CodeArts TestPlan幫助華為數(shù)通路由器產(chǎn)品繼承復(fù)用十余萬存量特性用例，累計(jì)管理近百萬用例，支撐大規(guī)模測(cè)試團(tuán)隊(duì)高效協(xié)作，快速開展測(cè)試活動(dòng)，全量測(cè)試執(zhí)行周期從周縮短至天，確保路由器產(chǎn)品高效率高質(zhì)量交付。

過去30多年來，華為公司一步步經(jīng)歷了流程化、自動(dòng)化、智能化的測(cè)試發(fā)展歷程，基于協(xié)同、高效、可信的測(cè)試?yán)砟?，形成了豐富而完整的測(cè)試體系。展望未來，華為云CodeArts TestPlan將不斷沉淀大型企業(yè)測(cè)試最佳實(shí)踐，打造測(cè)試覆蓋全、測(cè)試評(píng)估準(zhǔn)、測(cè)試執(zhí)行快、測(cè)試周期短、測(cè)試成本低的測(cè)試管理平臺(tái)，持續(xù)提升關(guān)鍵技術(shù)競(jìng)爭(zhēng)力，守護(hù)客戶產(chǎn)品質(zhì)量，助力客戶商業(yè)成功。

崔歡歡