現(xiàn)今智能電視功能繁多、開發(fā)復(fù)雜，若只仰賴瀑布式(Waterfall)的質(zhì)量確認(rèn)流程，容易因前面環(huán)節(jié)的推遲影響測試時程和內(nèi)容，導(dǎo)致未能發(fā)現(xiàn)產(chǎn)品重大缺陷或來不及修復(fù)，進(jìn)而衍生出產(chǎn)品延后上市、客訴層出不窮的窘境。

為了協(xié)助客戶解決市場風(fēng)險，百佳泰運用敏捷式(Agile)迭代(Iteration)概念，搭配探索性測試(Exploratory Testing)戰(zhàn)略，讓電視產(chǎn)品無論是在開發(fā)前、中、后期甚至是上市后，皆能對產(chǎn)品進(jìn)行客制化弱點分析及策略規(guī)劃，百佳泰更會在測試執(zhí)行期間與產(chǎn)品開發(fā)團隊緊密合作、實時提出建議，讓后續(xù)的產(chǎn)品開發(fā)與檢測時程上有更多的調(diào)整與應(yīng)變空間。

圖：瀑布式(Waterfall)與敏捷式(Agile)測試架構(gòu)的流程比較

至于什么是探索性測試? 以及如何建構(gòu)出高效的測試戰(zhàn)略，讓產(chǎn)品檢測達(dá)到事半功倍的效果? 我們將在本篇文章中為您一一說分明。

從「探索」中找出問題落點，從「測試」中分析關(guān)鍵問題

如果你曾經(jīng)看過Netflix上的超人氣賽車影集「Formula 1：飆速求生」，相信你絕對會對F1頂尖車隊的團隊策略和專業(yè)分工感到印象深刻。例如像是機械工程師的性能調(diào)校、策略組的沙盤推演、車手的意見回饋及電光石火的進(jìn)站換胎等等，哪怕是比賽途中突然間遭逢「雨戰(zhàn)」，無時無刻都在考驗著車隊上下的團隊合作和應(yīng)變能力。

而探索性測試的概念就好比一支訓(xùn)練有素的F1專業(yè)團隊，比賽前，運籌帷幄的策略小組會調(diào)查現(xiàn)況、制定最佳策略；比賽中，身經(jīng)百戰(zhàn)的車手則依場上實際狀況執(zhí)行戰(zhàn)術(shù)和臨機應(yīng)變，最終一同在賽后分析結(jié)果，做為下一場賽事的學(xué)習(xí)與參考，整個賽季周而復(fù)始。其中，策略的制定與執(zhí)行并不是呆板的一個步驟一個動作，而是能夠舉一反三、靈活運用！因此，高效的探索性測試著重于分析者與測試者的實務(wù)經(jīng)驗，唯有制定對的方向并搭配豐富的測試經(jīng)驗，才能有效率地探索并找出關(guān)鍵問題！搞懂了探索性測試的基本概念后，接下來帶你進(jìn)一步比較探索性測試所帶來的效益及應(yīng)用時機。

基本檢測還不夠? 加上探索性測試深入挖掘產(chǎn)品潛在問題

假設(shè)在相同的「情境結(jié)構(gòu)」與「測試時間」基準(zhǔn)的前提下，我們從下方的測試節(jié)點模擬比較中可以看出：相較于過往的基本測試，探索性測試是依據(jù)產(chǎn)品現(xiàn)階段所發(fā)現(xiàn)到的問題并憑借測試者的經(jīng)驗，針對「高風(fēng)險方向」的重點問題進(jìn)行更深入的探索，再從中挖掘潛藏在產(chǎn)品中的嚴(yán)重問題。

圖：探索性測試與基本測試之模擬比較圖

從比較表可知，探索性測試并非用來取代一般的基本檢測，而是需要彼此相輔相成，互相搭配，才能在產(chǎn)品測試階段發(fā)揮最大的綜效。因此，通常建議在以下的應(yīng)用時機執(zhí)行探索性測試：

正在開發(fā)中的產(chǎn)品：執(zhí)行完基本檢測后，再針對容易發(fā)生問題的部分執(zhí)行探索性測試，找出潛在的嚴(yán)重問題。

新增產(chǎn)品功能或有重大修正：針對相關(guān)功能執(zhí)行探索性測試，確認(rèn)有無潛在問題。

已上市產(chǎn)品：根據(jù)客訴問題或使用者回饋，執(zhí)行探索性測試以有效改善質(zhì)量。

 

百佳泰探索性測試服務(wù)4階段 全方面評估+客制化測試讓產(chǎn)品問題無所遁形

百佳泰團隊以第三方的角度與立場，憑借在電視檢測領(lǐng)域多年經(jīng)驗，可提供最專業(yè)的探索性測試服務(wù)：

Step 1 了解：執(zhí)行測試前和客戶溝通與討論，從產(chǎn)品規(guī)格/測試問題列表/用戶回饋等數(shù)據(jù)中了解目前重點問題。

Step 2 設(shè)計：將數(shù)據(jù)加以分析后，針對關(guān)鍵設(shè)備、情境、檢查要點擬定測試策略及范圍目標(biāo)。

Step 3 執(zhí)行：由擁有豐富測試經(jīng)驗的團隊依據(jù)擬定好的測試策略執(zhí)行探索測試。

Step 4 分析：根據(jù)測試結(jié)果提供分析與建議報告。

實測案例分享

測試背景

該名客戶已自行對自家電視產(chǎn)品進(jìn)行基本檢測，但產(chǎn)品上市后依舊收到如雪片般飛來的客訴問題，當(dāng)中很多問題在產(chǎn)品上市前未曾被發(fā)現(xiàn)，于是決定委托百佳泰針對該產(chǎn)品進(jìn)行客制化檢測，期望找出造成質(zhì)量缺陷的關(guān)鍵原因。

測試規(guī)劃

由客訴問題可初步判斷，產(chǎn)品在HDMI、Bluetooth、Wi-Fi等功能上皆有問題，百佳泰團隊隨即根據(jù)客戶提供的問題清單及市場用戶回饋，分別就關(guān)鍵設(shè)備、情境以及檢查要點，制定探索性測試之策略與方向。

客訴問題舉例

1. 接上藍(lán)牙耳機，使用了一段時間后，開始發(fā)生聲音斷斷續(xù)續(xù)、雜音或不同步的問題。
2. 在某些設(shè)定組合下，電視喇叭與音響設(shè)備會有聲音輸出/切換不穩(wěn)定、兼容性問題。
3. 只要串接上藍(lán)牙聲音設(shè)備，或是切換串流平臺、電視開關(guān)機…等操作下，就會有黑畫面或是嚴(yán)重的影像問題。
4. 某些連接情境下，HDMI-CEC之One Touch Play和Power on Device from TV功能異常。
5. 連接上某些市場主流的HDMI-CEC設(shè)備時會有辨識異常或是整體裝置列表顯示異常/不同步的現(xiàn)象。
6. 無線網(wǎng)絡(luò)聯(lián)機在開關(guān)機后，某些條件下會有聯(lián)機異常/狀態(tài)顯示異常。
7. 背板插槽設(shè)計不良，導(dǎo)致有些外部插拔裝置無法順利插入。

測試結(jié)果

整體來說，在只有一臺DUT的情況下，百佳泰僅花5個工作天便找到26筆問題，并依據(jù)問題的嚴(yán)重程度分成四個等級(見下表)，其中Critical 加上Medium的問題就足足累積了19筆，合計占比高達(dá) 73%，以一個已上市多時的產(chǎn)品而言，質(zhì)量可說是相當(dāng)不穩(wěn)定。

在問題類型分布方面，除了當(dāng)初主要測試的HDMI、Wi-Fi及Bluetooth等問題外，透過探索性測試竟還另外找出Sound、UX/UI、Picture(畫質(zhì)) 等共15個問題，占了整體問題數(shù)量的58%，其中Sound和Picture更是有5個Critical等級的問題，這結(jié)果是客戶始料未及的。

圖：探索性實測案例：問題類型分布

而在機構(gòu)設(shè)計部分，由于該產(chǎn)品在開發(fā)設(shè)計規(guī)劃時未考慮到部分功能需與其他外部插拔裝置做搭配使用(如下圖)，導(dǎo)致無法順利使用，除了影響使用者體驗外，長期使用下最壞的情況甚至有可能造成產(chǎn)品部分功能毀損。此問題雖然并未歸類在Critical等級，但以用戶體驗角度來說也是至關(guān)重要的一環(huán)。

建議與方針舉例

百佳泰依據(jù)測試結(jié)果及多年的測試經(jīng)驗，提供客戶以下建議：

兼容性建議：單單使用幾臺Soundbar/AVR/Headphone就有如此多的問題，市場上恐怕已有為數(shù)不少的兼容性問題正在發(fā)生，建議進(jìn)一步執(zhí)行大規(guī)模HDMI/Bluetooth音響或耳機設(shè)備(至少150+臺以上)之兼容性測試，才能確保產(chǎn)品兼容性無虞。

產(chǎn)品功能基本面建議：雖然客戶已自行經(jīng)過檢測才將產(chǎn)品上市，但我們發(fā)現(xiàn)許多HDMI基本協(xié)議功能皆有問題，建議針對HDMI Logo認(rèn)證測試方向做進(jìn)一步調(diào)查，找出問題根本。

機構(gòu)設(shè)計及用戶接口建議：有些機構(gòu)設(shè)計未考慮周邊產(chǎn)品搭配性問題，且用戶接口也未整合優(yōu)化，建議針對市占率較高的周邊產(chǎn)品及主要競爭電視產(chǎn)品進(jìn)行相關(guān)檢測及設(shè)計改善，全面提升市場競爭力。

透過上述的真實案例可知，若想要盡可能地避免產(chǎn)品在上市后產(chǎn)生大量客訴，進(jìn)而影響公司商譽，建議可以在產(chǎn)品開發(fā)階段就搭配「探索性測試」，及早找出產(chǎn)品潛在問題和設(shè)計缺陷，在產(chǎn)品上市前適時修正問題，減少客訴機率。

百佳泰擁有30年以上的測試驗證經(jīng)驗，多年來致力于研發(fā)創(chuàng)新檢測服務(wù)，協(xié)助客戶解決各式產(chǎn)品問題，若您想更進(jìn)一步了解，或是有相關(guān)產(chǎn)品驗證需求，歡迎您透過在線窗體與我們聯(lián)系。百佳泰服務(wù)團隊將誠摯為您服務(wù)！