Allion Labs/Franck Chen
隨著近年串流影片服務的崛起，根據研究機構Parks Associates報告指出，擁有智能電視的家庭中有超過一半的家庭使用智能電視作為播放串流媒體的主要裝置。電視不再僅只是單純的”看”電視，現(xiàn)階段所生產的電視幾乎都已搭載新功能，社群、游戲、網絡、隨選影片、TV APP…等皆可在電視上實現(xiàn)，成為數字家庭娛樂生活不可或缺的一塊。
因此相較過往現(xiàn)在電視廠商在產品開發(fā)上更需考慮各種新機能、使用者觀看習慣及多種使用情境，然而隨著終端用戶接觸產品時間變長，混雜的有線/無線環(huán)境，再加上復雜又頻繁的使用習慣及方式，不曾出現(xiàn)過的問題逐一浮現(xiàn)。
電視制造廠商面臨的現(xiàn)實與窘境
依據百佳泰在電視測試多年的經驗，一般智能電視中大概有5~10%的嚴重問題是在反復操作或長時間使用后機率性發(fā)生的。由于該類型的問題不容易透過一般方式檢測出來，所以實際上潛在的風險會再高于所統(tǒng)計出來的數據!
圖：隨機采樣10個規(guī)模不同大小項目之數據分析
然而即便是機率性發(fā)生的問題，若是將市場銷售數量及用戶使用頻率加以計算后，可預期實際發(fā)生的案例會遠比機率上的數字高出許多! 現(xiàn)今多數消費者在購買產品前會先搜尋產品相關信息及評價再加以評估是否購買，因此若無法在產品上市前有效降低這些機率性問題，將會有極大的客訴風險與退貨壓力。基于上述原因，必須體認到即使是機率是低到百分之幾的嚴重問題，仍然不可輕易忽視!
只不過如果透過一般人工方式針對機率性問題進行長時間或反復操作檢測的話，一來容易因專注力下降而造成人為疏失，二來會因為人力工作時間無法持續(xù)而需要拉長測試時程，面對上述的窘境經常造成廠商進退兩難。
以下將介紹百佳泰如何能在同時滿足『降低時間成本』以及『克服一般人力所不能及』的雙重條件下，有效率的協(xié)助客戶檢出潛在的嚴重問題以提升產品競爭力。
「自動化套件」與「客制化測試腳本」缺一不可，相輔相成才能有效檢出
為了協(xié)助客戶解決痛點，百佳泰團隊整合了硬件測試、軟件測試、兼容性與VFT（虛擬現(xiàn)場測試）的測試概念，設計開發(fā)出 『智能家庭關鍵場景測試』 (ACSTS , Allion Critical Scenario Test Solution)，彌補在人工測試上所無法達到的缺陷。
首先，透過百佳泰自行開發(fā)的ACSTS自動化測試套件，可執(zhí)行一系列壓力相關測試項目，除了可延伸檢測時間提升時間利用率外，也能減少人為疏失、提升檢測正確率，克服一般人工測試的種種局限。
第二，運用我們多年的測試與市場調查經驗，分析使用者情境及關鍵的操作與條件，客制化測試腳本，搭配Log結果，自動產出報告，有效提升問題檢出率!!
綜合以上優(yōu)勢，百佳泰關鍵情境解決方案無論是在時間利用率、檢測正確率或是問題檢出率上，均遠遠優(yōu)于一般人工測試。
潛藏在智能電視中嚴重卻又不易發(fā)現(xiàn)的問題有哪些?
以3種不同module(DUT1, DUT2, DUT3)為測試對象：
- 案例背景:
客戶的電視產品不時產生機率性的嚴重問題，以往都是以人工方式做反復性或長時間性的檢測與驗證，但是除了花費超量的人力與時間成本以外成效也不彰，無法全面檢驗出產品問題，于是開發(fā)新產品時尋求百佳泰協(xié)助檢測，希望能有效率減少機率性問題產生，提升產品質量。
- 了解客戶痛點并擬定驗證策略:
- 問題檢出:
執(zhí)行完測試后，我們統(tǒng)整出以下問題：
- 在播完多種影音串流影片后，切換到數字電視訊號(4K)會發(fā)生當機的問題，機率為2/100。
- 播放Netflix(Dolby Atmos)時切換音源輸出至AVR時，會出現(xiàn)錯誤訊息而無法播放影片，機率為3/100。
- 在HDMI(4K 120Hz)底下，對TV進行斷電重開會發(fā)生偵測不到HDMI訊號的問題，機率為2/100。
- 在切換不同APP并播放影片后，遙控器按鍵沒有作用，機率為1/100。
- 連接藍牙喇叭并且播放Netflix和YouTube影片后，發(fā)生無線網絡斷線問題，機率為3/100。
- 連接次世代游戲主機并切換為游戲模式后，電視產生黑屏，機率為4/100。
透過以上實測結果便可明白，有些問題必須在特定情境搭配特定測試手法下才有辦法重現(xiàn)，若僅依照一般檢測程序根本無法有效做到。
Bug層出不窮解不完怎么辦? 百佳泰關鍵情境測試助您有效提升檢測效率
從以下三大面向來看，帶來的效益不容小覷!
- 可以節(jié)省多少人力時間?
百佳泰解決方案比一般人工測試節(jié)省了約90%以上的時間，大幅縮短整體檢測時程，也減少了任何有可能的人為疏失。
- 可以檢出多少潛在風險?
以問題『在播完多種影音串流影片后，切換到數字電視訊號(4K)會發(fā)生當機的問題，機率2/100』為例，使用者利用APP觀看影片后切換到數字電視這樣的操作行為，一天當中至少會執(zhí)行3~5次，若以1萬臺的市場銷售數量來推算：
2%機率 * 3次/天 *10,000臺 = 600次/天，相當于該問題每天會有600次的機會在市場上發(fā)生，潛在的客訴風險著實不可輕視!
- 不只測試結果，還能取得問題log?!
除了可協(xié)助找出root cause修復問題外，百佳泰也會提供log報告，讓廠商可依據log信息進行建文件與追蹤，做為日后新產品設計與開發(fā)上的參考與借鏡，進而降低同樣問題發(fā)生的機會或是修復成本。
如何有效減少機率性的嚴重問題，絕對是廠商想要提升產品競爭力不可或缺的一環(huán)，長遠來看更是維護品牌價值的重要關鍵!若您對于智能家庭關鍵場景測試方案有興趣的話，可參考智能家庭關鍵場景測試或是直接填寫咨詢窗體，將會有專人與您聯(lián)系。
