Allion Labs/Franck Chen
隨著近年串流影片服務(wù)的崛起,根據(jù)研究機(jī)構(gòu)Parks Associates報告指出,擁有智能電視的家庭中有超過一半的家庭使用智能電視作為播放串流媒體的主要裝置。電視不再僅只是單純的”看”電視,現(xiàn)階段所生產(chǎn)的電視幾乎都已搭載新功能,社群、游戲、網(wǎng)絡(luò)、隨選影片、TV APP…等皆可在電視上實現(xiàn),成為數(shù)字家庭娛樂生活不可或缺的一塊。
因此相較過往現(xiàn)在電視廠商在產(chǎn)品開發(fā)上更需考慮各種新機(jī)能、使用者觀看習(xí)慣及多種使用情境,然而隨著終端用戶接觸產(chǎn)品時間變長,混雜的有線/無線環(huán)境,再加上復(fù)雜又頻繁的使用習(xí)慣及方式,不曾出現(xiàn)過的問題逐一浮現(xiàn)。
電視制造廠商面臨的現(xiàn)實與窘境
依據(jù)百佳泰在電視測試多年的經(jīng)驗,一般智能電視中大概有5~10%的嚴(yán)重問題是在反復(fù)操作或長時間使用后機(jī)率性發(fā)生的。由于該類型的問題不容易透過一般方式檢測出來,所以實際上潛在的風(fēng)險會再高于所統(tǒng)計出來的數(shù)據(jù)!
圖:隨機(jī)采樣10個規(guī)模不同大小項目之?dāng)?shù)據(jù)分析
然而即便是機(jī)率性發(fā)生的問題,若是將市場銷售數(shù)量及用戶使用頻率加以計算后,可預(yù)期實際發(fā)生的案例會遠(yuǎn)比機(jī)率上的數(shù)字高出許多! 現(xiàn)今多數(shù)消費者在購買產(chǎn)品前會先搜尋產(chǎn)品相關(guān)信息及評價再加以評估是否購買,因此若無法在產(chǎn)品上市前有效降低這些機(jī)率性問題,將會有極大的客訴風(fēng)險與退貨壓力?;谏鲜鲈?,必須體認(rèn)到即使是機(jī)率是低到百分之幾的嚴(yán)重問題,仍然不可輕易忽視!
只不過如果透過一般人工方式針對機(jī)率性問題進(jìn)行長時間或反復(fù)操作檢測的話,一來容易因?qū)W⒘ο陆刀斐?strong>人為疏失,二來會因為人力工作時間無法持續(xù)而需要拉長測試時程,面對上述的窘境經(jīng)常造成廠商進(jìn)退兩難。
以下將介紹百佳泰如何能在同時滿足『降低時間成本』以及『克服一般人力所不能及』的雙重條件下,有效率的協(xié)助客戶檢出潛在的嚴(yán)重問題以提升產(chǎn)品競爭力。
「自動化套件」與「客制化測試腳本」缺一不可,相輔相成才能有效檢出
為了協(xié)助客戶解決痛點,百佳泰團(tuán)隊整合了硬件測試、軟件測試、兼容性與VFT(虛擬現(xiàn)場測試)的測試概念,設(shè)計開發(fā)出 『智能家庭關(guān)鍵場景測試』 (ACSTS , Allion Critical Scenario Test Solution),彌補(bǔ)在人工測試上所無法達(dá)到的缺陷。
首先,透過百佳泰自行開發(fā)的ACSTS自動化測試套件,可執(zhí)行一系列壓力相關(guān)測試項目,除了可延伸檢測時間提升時間利用率外,也能減少人為疏失、提升檢測正確率,克服一般人工測試的種種局限。
第二,運用我們多年的測試與市場調(diào)查經(jīng)驗,分析使用者情境及關(guān)鍵的操作與條件,客制化測試腳本,搭配Log結(jié)果,自動產(chǎn)出報告,有效提升問題檢出率!!
綜合以上優(yōu)勢,百佳泰關(guān)鍵情境解決方案無論是在時間利用率、檢測正確率或是問題檢出率上,均遠(yuǎn)遠(yuǎn)優(yōu)于一般人工測試。
潛藏在智能電視中嚴(yán)重卻又不易發(fā)現(xiàn)的問題有哪些?
以3種不同module(DUT1, DUT2, DUT3)為測試對象:
- 案例背景:
客戶的電視產(chǎn)品不時產(chǎn)生機(jī)率性的嚴(yán)重問題,以往都是以人工方式做反復(fù)性或長時間性的檢測與驗證,但是除了花費超量的人力與時間成本以外成效也不彰,無法全面檢驗出產(chǎn)品問題,于是開發(fā)新產(chǎn)品時尋求百佳泰協(xié)助檢測,希望能有效率減少機(jī)率性問題產(chǎn)生,提升產(chǎn)品質(zhì)量。
- 了解客戶痛點并擬定驗證策略:
- 問題檢出:
執(zhí)行完測試后,我們統(tǒng)整出以下問題:
- 在播完多種影音串流影片后,切換到數(shù)字電視訊號(4K)會發(fā)生當(dāng)機(jī)的問題,機(jī)率為2/100。
- 播放Netflix(Dolby Atmos)時切換音源輸出至AVR時,會出現(xiàn)錯誤訊息而無法播放影片,機(jī)率為3/100。
- 在HDMI(4K 120Hz)底下,對TV進(jìn)行斷電重開會發(fā)生偵測不到HDMI訊號的問題,機(jī)率為2/100。
- 在切換不同APP并播放影片后,遙控器按鍵沒有作用,機(jī)率為1/100。
- 連接藍(lán)牙喇叭并且播放Netflix和YouTube影片后,發(fā)生無線網(wǎng)絡(luò)斷線問題,機(jī)率為3/100。
- 連接次世代游戲主機(jī)并切換為游戲模式后,電視產(chǎn)生黑屏,機(jī)率為4/100。
透過以上實測結(jié)果便可明白,有些問題必須在特定情境搭配特定測試手法下才有辦法重現(xiàn),若僅依照一般檢測程序根本無法有效做到。
Bug層出不窮解不完怎么辦? 百佳泰關(guān)鍵情境測試助您有效提升檢測效率
從以下三大面向來看,帶來的效益不容小覷!
- 可以節(jié)省多少人力時間?
百佳泰解決方案比一般人工測試節(jié)省了約90%以上的時間,大幅縮短整體檢測時程,也減少了任何有可能的人為疏失。
- 可以檢出多少潛在風(fēng)險?
以問題『在播完多種影音串流影片后,切換到數(shù)字電視訊號(4K)會發(fā)生當(dāng)機(jī)的問題,機(jī)率2/100』為例,使用者利用APP觀看影片后切換到數(shù)字電視這樣的操作行為,一天當(dāng)中至少會執(zhí)行3~5次,若以1萬臺的市場銷售數(shù)量來推算:
2%機(jī)率 * 3次/天 *10,000臺 = 600次/天,相當(dāng)于該問題每天會有600次的機(jī)會在市場上發(fā)生,潛在的客訴風(fēng)險著實不可輕視!
- 不只測試結(jié)果,還能取得問題log?!
除了可協(xié)助找出root cause修復(fù)問題外,百佳泰也會提供log報告,讓廠商可依據(jù)log信息進(jìn)行建文件與追蹤,做為日后新產(chǎn)品設(shè)計與開發(fā)上的參考與借鏡,進(jìn)而降低同樣問題發(fā)生的機(jī)會或是修復(fù)成本。
如何有效減少機(jī)率性的嚴(yán)重問題,絕對是廠商想要提升產(chǎn)品競爭力不可或缺的一環(huán),長遠(yuǎn)來看更是維護(hù)品牌價值的重要關(guān)鍵!若您對于智能家庭關(guān)鍵場景測試方案有興趣的話,可參考智能家庭關(guān)鍵場景測試或是直接填寫咨詢窗體,將會有專人與您聯(lián)系。