通常每款智能音箱在上市前，其所支持的數(shù)字助理都會經(jīng)過性能驗證，以確保產(chǎn)品正常運(yùn)作，并符合用戶預(yù)期。然而，即便產(chǎn)品經(jīng)過基本身份驗證，現(xiàn)實生活中還是會遇到大大小小的使用問題，例如無法喚醒，或語音識別不正確等狀況。究竟是什么原因造成這些問題？以下我們將分成幾個層面來探討。

智能音箱的四大性能指標(biāo)

首先我們來了解一下支持亞馬遜Alexa語音助理的智能音箱，所需要通過的驗證項目。百佳泰目前已經(jīng)有提供廠商進(jìn)行Amazon Alexa Built-in的相關(guān)性能驗證，其四種性能指針如下：

• FRR (Wake-Word False Rejection Rate) 驗證喚醒的正確率，
  透過播放預(yù)錄的測試語音，來記錄受測產(chǎn)品是否每次都能被正確喚醒。
• RAR (Response Accuracy Rate)驗證回復(fù)的正確率
  透過播放預(yù)錄的測試語音，來記錄受測產(chǎn)品是否能每次正確的回復(fù)問題，或是執(zhí)行指令動作。
• WWDD (Wake Word Detection Delay) 響應(yīng)時間
  為了能達(dá)到更實時的反應(yīng)，避免用戶等待的不良體驗，這項驗證受測產(chǎn)品，在收到喚醒語音跟后續(xù)的命令之間，所需要的時間長短。
• FAR (Wake-Word False Alarm Rate) 喚醒詞測試
  通常智能音箱接上電源后，就會保持全天候待命的狀態(tài)。但是一般用戶對話時，不會特意去避開使用喚醒詞，或是難免說了與喚醒詞發(fā)音相近的詞語。這項測試將在長時間的對話進(jìn)行中，受測產(chǎn)品不會一直被誤喚醒。

圖1: 百佳泰提供之Amazon Alexa認(rèn)證測試報告

花錢買罪受？聽不懂人話的智能音箱

一般來說，智能音箱在通過了上述的性能指針驗證后，可以說是已經(jīng)具備了一定程度的語音識別能力，同時也具備了可上市的條件。

不過！現(xiàn)實往往沒想象中美好，

難道通過驗證就保證萬無一失了嗎？其實問題還是層出不窮…

消費(fèi)者花了大錢，原本迫不及待想跟語音助理對話互動，卻發(fā)現(xiàn)問題一堆，實在非常掃興。用戶買回家經(jīng)過簡單的設(shè)定，把智能音箱連上網(wǎng)絡(luò)完成登入，正準(zhǔn)備開始使用時，卻發(fā)現(xiàn)語音助理怎么怪怪的，無法喚醒？不然就是問了幾個簡單問題卻答非所問！又或者是發(fā)生以下狀況:

• 沒叫它時，自己卻突然被喚醒
• 回應(yīng)緩慢
• 網(wǎng)絡(luò)聯(lián)機(jī)不穩(wěn)定
• 聲音質(zhì)量不佳

基本性能驗證是不夠的！智能音箱需要更生活化的驗證測試

先前提到的性能指針驗證，基本上是以固定數(shù)量的測試語音，透過不同的發(fā)音距離及發(fā)音源角度，外加幾種噪音干擾，來驗證智能音箱的性能表現(xiàn)。

對廠商而言時間就是金錢，只有縮短產(chǎn)品研發(fā)及驗證時間，才能越早開始獲利。然而，若驗證時程被限縮又無法針對問題進(jìn)行精準(zhǔn)的測試，恐怕廠商在產(chǎn)品上市后，還是會收到消費(fèi)者客訴，甚至面臨退貨等情況。

為了幫助廠商在上市前，用最有效率、精準(zhǔn)的驗證測試發(fā)現(xiàn)產(chǎn)品的潛在風(fēng)險，百佳泰以使用者的角度出發(fā)，針對音響特性提出詳盡的測試項目：

• 語音種類及數(shù)量
• 語音的口音及腔調(diào)
• 更多的距離變換
• 更多的環(huán)境噪音
• 貼近不同家居裝潢材料的表現(xiàn)(玻璃、布窗簾、百頁窗、書本、電視…)
• 受測產(chǎn)品擺設(shè)的位置(靠墻、靠窗、電視柜、茶幾、書桌、床頭柜…)

圖2: 語音識別的測試環(huán)境

更多驗證內(nèi)容請參考Audio 聲學(xué)驗證實驗室

智慧喇叭實測分享-原來擺放位置是門學(xué)問!

百佳泰專業(yè)團(tuán)隊以Amazon Echo作為DUT，分別在不同的阻礙條件下進(jìn)行測試：

智能語音可能使用情境

阻礙條件：無阻礙、柜子旁、窗簾旁、書本旁

發(fā)音距離：1公尺、3公尺

測試語音：英語、男聲、女聲，共480句

環(huán)境噪音：DUT音響正在播放音樂(Device Music Playback)、其他裝置正在播放音樂(External Music)、噪音(Noise)、無噪音(Silence)

智能語音在不同情境下的回應(yīng)正確率

圖3: 模擬家居環(huán)境的測試結(jié)果

從實測結(jié)果可發(fā)現(xiàn)，在無家具阻隔的情況下，即使環(huán)境中有噪音干擾，智能語音的辨識度還是能夠達(dá)到100%。但若是稍微改變擺放位置，例如被窗簾、書或柜子擋住，正確率都無法達(dá)到百分之一百，也會因為不同的噪音干擾也有不同表現(xiàn)力。

在一般的產(chǎn)品性能驗證中，為了量化測試的結(jié)果，通常會以最理想的擺放位置進(jìn)行語音識別的驗證。但這并不符合真實的使用情境，因為消費(fèi)者買回家后，可能會把音響放在任何地方，產(chǎn)品表現(xiàn)力必定會受到環(huán)境因素影響。然而這些潛在風(fēng)險，卻無法透過性能指針驗證及早發(fā)現(xiàn)，進(jìn)而埋下日后消費(fèi)者客訴的種子。

百佳泰除了協(xié)助客戶取得語音助理的認(rèn)證之外，同時也提供客制化的情境測試，能夠模擬多種家居布置條件及場景，用來驗證智能音箱擺放位置的影響，進(jìn)而協(xié)助廠商了解消費(fèi)者在使用時，可能會面臨的潛在問題，并有機(jī)會及早改善并免上市后接到客訴之窘境。若有需要任何咨詢相關(guān)測試的需求，還請聯(lián)系百佳泰。