9月16日，在北京舉行的“火山引擎增長沙龍-人工智能專場(chǎng)” 上，火山引擎智能視頻編輯相關(guān)技術(shù)人員出席活動(dòng)，詳細(xì)講解了字節(jié)跳動(dòng)音視頻編輯中間件非線性編輯器的核心原理。

　　火山引擎認(rèn)為，對(duì)于任何一款移動(dòng)端APP產(chǎn)品來說，優(yōu)質(zhì)的內(nèi)容生態(tài)都離不開優(yōu)秀的創(chuàng)作者，也離不開優(yōu)秀的工具加持。火山引擎的非線性編輯器采用了一種新型的“數(shù)據(jù)驅(qū)動(dòng)模型”。與傳統(tǒng)的事件驅(qū)動(dòng)范式相比，這一模型通過對(duì)五種模型的組合使用，即可實(shí)現(xiàn)各種各樣的編輯能力。

　　那么，在這一“新潮”的產(chǎn)品理念的背后，原理是怎樣的呢?為什么更改一些數(shù)據(jù)或模型，就可以最終影響視頻生成的效果呢?它背后的引擎是如何操作、如何與數(shù)據(jù)關(guān)聯(lián)起來的呢?

　　火山引擎智能視頻編輯相關(guān)技術(shù)人員在講解中表示，在編輯器中，如果將定義的模型抽象開來，可以認(rèn)為它是一棵樹，其根接點(diǎn)就是NLEModel，在它的字節(jié)點(diǎn)下面可以定義不同的Track，Track下面又可以定義不同的片段Slot，每個(gè)Slot可以定義它的資源?；谶@一基礎(chǔ)，再去做最終引擎的操作和數(shù)據(jù)的對(duì)應(yīng)就非常方便。

　　在編輯過程中，用戶對(duì)視頻編輯的每一次操作都會(huì)生成一棵新的樹，有了這棵新的樹之后，再和原始的樹做對(duì)比，就知道這個(gè)中間發(fā)生了哪些過程，最終要呈現(xiàn)給用戶的是一種什么樣的形態(tài)。

　　詳細(xì)來說，本來這棵樹的每個(gè)節(jié)點(diǎn)定義了兩個(gè)屬性，一個(gè)是name，一個(gè)是ID。name相同，ID發(fā)生了變化，說明它的屬性或者它的子節(jié)點(diǎn)發(fā)生了變化。舉例來說，如果拿原始的樹跟生成的新樹進(jìn)行對(duì)比，發(fā)現(xiàn)前者的NLETrack2沒有了，但多了一款NLETrack3，就可以知道，它刪掉了Track2，添加了Track3。那么，基于這些增量的信息，就可以對(duì)整個(gè)模型進(jìn)行一次增量的重演，就達(dá)到了數(shù)據(jù)和底層引擎的映射。

　　此外，redo/undo的實(shí)現(xiàn)是另一個(gè)關(guān)鍵操作。用戶在添加完軌道以后，每一次都會(huì)基于當(dāng)前的狀態(tài)生成一個(gè)新樹。此時(shí)這個(gè)樹處于只讀狀態(tài)，當(dāng)用戶操作完之后、需要生成redo/undo記錄點(diǎn)時(shí)，就可以調(diào)用done的方法，編輯器就會(huì)把這棵樹包裝成NLECommit，存儲(chǔ)到redo/undo隊(duì)列里面。之后用戶切換不同的狀態(tài)，撤銷重做這些動(dòng)作實(shí)際上是切換不同的NLECommit，將其對(duì)應(yīng)的樹做一次重演就達(dá)到了恢復(fù)的狀態(tài)。

　　基于用戶的實(shí)際需求，火山引擎在編輯器中還對(duì)Commit和done做了分離。具體出發(fā)點(diǎn)很簡(jiǎn)單，以調(diào)節(jié)濾鏡為例，用戶在一次調(diào)節(jié)中可能做了多次嘗試，最終確定了某種效果。但如果想要恢復(fù)的時(shí)候，用戶并不需要記錄中間的每一次操作，只需要知道他做了“一次”濾鏡調(diào)節(jié)的動(dòng)作即可。

　　所以正是基于這一理解，火山引擎在redo/undo隊(duì)列里面存儲(chǔ)了不同的數(shù)據(jù)模型，這些數(shù)據(jù)模型可以非常方便的做序列化和反序列化存儲(chǔ)本地的草稿。換句話說，草稿里面已經(jīng)存儲(chǔ)好了它的redo/undo的功能，所以它是一個(gè)非常完整的從草稿到當(dāng)時(shí)編輯狀態(tài)的模式。這也正是火山引擎視頻編輯器的另外一個(gè)特點(diǎn)。

　　據(jù)悉，火山引擎增長沙龍邀請(qǐng)了火山引擎內(nèi)部技術(shù)專家，從技術(shù)、產(chǎn)品、 應(yīng)用和體驗(yàn)4大維度，剖析智能互動(dòng)特效和智能編輯在泛娛樂行業(yè)中的業(yè)務(wù)增長邏輯，探討泛娛樂行業(yè)增長的新引擎。未來，火山引擎還會(huì)繼續(xù)將成熟的技術(shù)探索、實(shí)踐經(jīng)驗(yàn)和產(chǎn)品方法論分享給行業(yè)，共創(chuàng)行業(yè)技術(shù)繁榮。