MIT用新AI技術(shù)讓視頻不再卡頓
視頻的卡頓和低清晰度大大降低了觀眾的觀看體驗(yàn),同時(shí)也損害了廣告主們的利益。目前,視頻的卡頓和低清晰度都是由于一些特殊的算法造成的,它們將視頻分解成小塊,邊看視頻的同時(shí),它就在一邊加載。如果網(wǎng)絡(luò)速度很慢,播放器可能會(huì)在接下來(lái)的幾秒鐘里播放低分辨率的視頻,以確保你仍然可以不間斷地觀看——因此,就出現(xiàn)了視頻畫(huà)面變得模糊的情況。如果你嘗試跳過(guò)尚未加載的視頻的部分,這樣的話,畫(huà)面就必須停止,以緩沖那些還沒(méi)有加載的部分。
近日,MIT計(jì)算機(jī)科學(xué)與人工智能實(shí)驗(yàn)室(CSAIL)的一個(gè)研究團(tuán)隊(duì)給出了新的解決方案:他們開(kāi)發(fā)出一個(gè)名叫“Pensieve”的AI,它可以挑選***算法,確保流媒體視頻播放時(shí)順暢無(wú)阻不中斷,回放時(shí)讓質(zhì)量達(dá)到***。
與傳統(tǒng)方法相比,CSAIL的方法有一個(gè)明顯的不同點(diǎn):它使用神經(jīng)網(wǎng)絡(luò)而不是嚴(yán)格的算法式技術(shù)。通過(guò)反饋系統(tǒng)神經(jīng)網(wǎng)絡(luò)可以持續(xù)學(xué)習(xí),尋找優(yōu)化方法,反饋系統(tǒng)的目標(biāo)是讓視頻回放變得更流暢,如果是傳統(tǒng)方法,就會(huì)設(shè)定一套明確規(guī)則,緩沖視頻時(shí)算法技術(shù)會(huì)按規(guī)則行事。
Pensieve以現(xiàn)有技術(shù)作為基礎(chǔ)進(jìn)行改進(jìn),比如ABR技術(shù)。YouTube就使用了該技術(shù),簡(jiǎn)單來(lái)講就是降低視頻質(zhì)量,確保視頻流暢播放。AI可以根據(jù)設(shè)備的網(wǎng)絡(luò)條件選擇選擇不同的算法,盡可能彌補(bǔ)某一種方法的缺陷。在實(shí)驗(yàn)過(guò)程中,CSAIL研究團(tuán)隊(duì)發(fā)現(xiàn)視頻以流形式播放時(shí)再緩沖減少10-30%,也就是播放時(shí)速度比傳統(tǒng)算法快10-30%,畫(huà)質(zhì)提高10-25%。
目前團(tuán)隊(duì)正在測(cè)試,看看如何將系統(tǒng)應(yīng)用于VR視頻,如果想獲得高質(zhì)量VR體驗(yàn)需要很高的比特率,Pesieve剛好可以派上用場(chǎng),改進(jìn)體驗(yàn)。