聲音與影像的同步,即為AV-Sync,是影響多媒體體驗(yàn)的重要的因素。隨著人們生活及工作型態(tài)改變,我們不再需要面對(duì)面才能對(duì)話,也不必聚集于實(shí)體現(xiàn)場(chǎng)才能進(jìn)行演講,拜網(wǎng)絡(luò)的普及和移動(dòng)通訊的便利,在任何地方都能以各種形式來(lái)進(jìn)行不同目的的聲音或影像傳遞。
除了硬件及網(wǎng)絡(luò)設(shè)備外,因應(yīng)各種用途及活動(dòng),已開(kāi)發(fā)出許多應(yīng)用軟件以滿足不同族群的需求,下面列舉們最常被使用的視訊軟件:
實(shí)時(shí)通訊(Instant Messaging, IM)
– Skype, Line, Facebook Messenger, WhatsApp, WeChat, Telegram…
在線會(huì)議 (Meeting & Conference)
– Google Meet, Microsoft Teams, Zoom…
游戲聊天(Gaming Chat)
– Discord, EPIC Game store, Mumble, Guilded, Steam Chat…
在線直播(Live Streaming)
– YouTube Live, Facebook Live, Instagram Live, Twitch…
根據(jù)百佳泰豐富經(jīng)驗(yàn)及相關(guān)收集結(jié)果,用戶在影音設(shè)備與視訊軟件的不同應(yīng)用中,可能會(huì)遇到使用困難或影響體驗(yàn)的狀況,可見(jiàn)以下幾點(diǎn):
1. 實(shí)時(shí)通訊過(guò)程中影音不同步
2. 通訊過(guò)程很順利,但播放錄像文件時(shí)會(huì)有影像或聲音延遲
3. 直播中有影沒(méi)聲或是有聲無(wú)影
4. 通訊中影像破圖
5. 開(kāi)會(huì)中出現(xiàn)斷斷續(xù)續(xù)的爆音
這些問(wèn)題會(huì)因?yàn)橐纛l、視頻和屏幕是否共享,以及網(wǎng)絡(luò)、軟硬件及連接的方式,而產(chǎn)生差異。以聲音與影像的同步為例,不同的視訊軟件會(huì)根據(jù)音頻及視頻接收時(shí)間,而做出影音不處理、聲音延遲處理、影片丟幀處理等等的影音處理方式,下面我們會(huì)以實(shí)際案例來(lái)說(shuō)明。
用一個(gè)內(nèi)建麥克風(fēng)的USB webcam以不同的視訊軟件及不同的計(jì)算機(jī)來(lái)實(shí)驗(yàn),在視訊的過(guò)程中音頻及視頻的同步狀態(tài)如何。透過(guò)LatencyKit來(lái)量測(cè)音頻及視頻的延遲時(shí)間。
Video and audio latency measurement system
Host的音頻及視頻經(jīng)過(guò)網(wǎng)絡(luò)傳遞到Client端,再分析Client端的音頻及影頻延遲,就可以計(jì)算出AV-Sync了。
我們可以看到測(cè)試的AV-Sync結(jié)果如下,數(shù)據(jù)為正值代表聲音先出來(lái),反之負(fù)值為影像先出來(lái)。量測(cè)的AV-Sync值介于73ms ~ -100ms,表現(xiàn)普通。
光的速度比聲音還快,日常生活中人們已經(jīng)習(xí)慣先看到影像再聽(tīng)到聲音,加上每種產(chǎn)品的定位不同,能夠接受的標(biāo)準(zhǔn)便因人而異。我們可從各協(xié)會(huì)與不同應(yīng)用所定訂的標(biāo)準(zhǔn),來(lái)思考產(chǎn)品的定位。
因此,我們可利用上述的標(biāo)準(zhǔn)制作出影音同步感知表,透過(guò)結(jié)果的分布分析,能更快速的了解產(chǎn)品的取向及定位,例如若落點(diǎn)全數(shù)在好或非常好的范圍,則測(cè)試結(jié)果Pass,并能定義表現(xiàn)為優(yōu)秀。
透過(guò)上圖感知表,我們可以輕松的將感受及體驗(yàn)可視化,從中發(fā)現(xiàn)已有不少數(shù)據(jù)落于-60ms至-100ms屬表現(xiàn)普通的區(qū)間,雖不是大問(wèn)題,但長(zhǎng)久使用下對(duì)于使用者體驗(yàn)來(lái)說(shuō)便有可能造成減分。
外接一個(gè)USB麥克風(fēng)、多接幾個(gè)USB Hub、使用不同的軟件及操作系統(tǒng),上述情況都可能是造成影音不同步的要素。百佳泰透過(guò)多年來(lái)的測(cè)試認(rèn)證經(jīng)驗(yàn),不僅可以為客戶設(shè)計(jì)完善的測(cè)試環(huán)境,更提供了完整的測(cè)試服務(wù)和數(shù)據(jù)分析,讓合作客戶得到更有效并滿意的測(cè)試結(jié)果,幫助產(chǎn)品開(kāi)發(fā)和提升性能。
若您有相關(guān)測(cè)試需求或內(nèi)容疑問(wèn),歡迎咨詢百佳泰。