華為云+AI,視頻分析全面進(jìn)入智能時代
云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)、人工智能等信息技術(shù)飛速發(fā)展及傳統(tǒng)產(chǎn)業(yè)數(shù)字化的轉(zhuǎn)型,一方面媒體數(shù)據(jù)量呈現(xiàn)幾何級增長,據(jù)IDC預(yù)測,全球數(shù)據(jù)總量預(yù)計2020年達(dá)到44ZB;另一方面,媒體的生產(chǎn)、傳播和消費(fèi)形式升級。巨量數(shù)據(jù)中,70%將會以圖片和視頻的形式存儲和傳播。這些數(shù)據(jù)從生產(chǎn)、傳播到用戶消費(fèi),傳統(tǒng)方式運(yùn)營成本居高不下。人工智能在視覺領(lǐng)域發(fā)展趨于成熟,基于AI人工智能的視頻內(nèi)容分析能從根本上解決傳統(tǒng)內(nèi)容分析方法性能低下的問題。AI助力,視頻分析將全面進(jìn)入智能時代。
視頻從生產(chǎn)到消費(fèi)全流程智能化
視頻從生產(chǎn)到消費(fèi)的全流程升級。
1. 生產(chǎn)
視頻采集,從專業(yè)設(shè)備到移動終端,視頻內(nèi)容采集大眾化。華為云EI在采集階段可提供美顏、濾鏡、個性化等特效處理技術(shù),助力視頻采集即處理。
人臉交換效果圖
內(nèi)容審核,用戶采集內(nèi)容上傳存儲前,華為云EI提供視頻內(nèi)容智能審核能力,包括視頻質(zhì)量評估、黃/暴/恐鑒別、重復(fù)/相似鑒別及版權(quán)指紋分析等,避免低質(zhì)量、重復(fù)/疑似不安全內(nèi)容進(jìn)入傳播流程。
2. 編輯
(1)結(jié)構(gòu)化分析,針對各種類型的長、短視頻,提供智能結(jié)構(gòu)化分析,將視頻以鏡頭、內(nèi)容片段等結(jié)構(gòu)化形式進(jìn)行描述,便于后續(xù)的內(nèi)容分析、存儲和分發(fā)。
(2)內(nèi)容分析,從場景識別、主體識別、行為/事件檢測、語音/文本分析及內(nèi)容描述等方面對其進(jìn)行智能化分析,支持多維度內(nèi)容查詢和檢索。
(3)智能編輯,基于智能內(nèi)容分析,初步提供以下智能視頻編輯技術(shù):
a) 視頻拆條
相較于長視頻,短視頻更有利于在互聯(lián)網(wǎng)傳播,對傳統(tǒng)媒體的節(jié)目進(jìn)行拆條是不可或缺的。華為云EI基于人物、場景、語音、OCR字幕等多模態(tài)信息分析技術(shù),快速精確地把長視頻分割成不同主題的片段。面向海量多媒體視頻,大幅提高視頻識別、剪輯、檢索等處理的效率,降低人工運(yùn)營的成本。新聞類視頻拆條準(zhǔn)確率超過95%,特定場景準(zhǔn)確率超過98%。
b) 視頻摘要
靜態(tài)摘要,基于視頻鏡頭變換、內(nèi)容理解技術(shù),華為云針對不同類型的長、短視頻提供視頻靜態(tài)摘要服務(wù),能夠?qū)?個小時視頻壓縮成5分鐘的摘要內(nèi)容,用于運(yùn)營管理人員的內(nèi)容快速瀏覽及用戶快速內(nèi)容播放。
視頻濃縮,使用背景建模、主體檢測、運(yùn)動軌跡跟蹤、前/背景融合技術(shù),華為云EI提供視頻濃縮服務(wù),將極長視頻中的事件提取出來,集中濃縮到較短的視頻片段,便于視頻內(nèi)容中事件的快速觀看。
c) 視頻封面
基于視頻鏡頭變換、內(nèi)容理解/分析和圖像美學(xué)分析技術(shù),快速提取內(nèi)容相關(guān)、構(gòu)圖優(yōu)美的關(guān)鍵幀作為封面,吸引用戶進(jìn)一步觀看。相比于人工選取封面,智能封面選取速度提高20+倍,大幅降低運(yùn)營成本。精彩封面能夠吸引用戶注意的同時,大幅提高視頻點(diǎn)擊率。
d) 視頻內(nèi)容標(biāo)簽
視頻識別,從多維度對視頻內(nèi)容進(jìn)行提取,將非結(jié)構(gòu)化的視頻文件,轉(zhuǎn)換為結(jié)構(gòu)化的數(shù)據(jù),為視頻搜索,視頻推薦,視頻運(yùn)營等提供了必不可少的信息。
e) 水印處理
用戶上傳的內(nèi)容除了新采集的視頻,還有很大一部分為已有視頻的重新傳播。為了保護(hù)原始版權(quán),新添加的內(nèi)容需要打上水印,而重復(fù)傳播的這部分視頻有可能被重復(fù)打上水印,原始視頻水印可能在中間傳播過程中被去除。為了更好地保護(hù)內(nèi)容版權(quán),華為云EI提供水印檢測和反去除技術(shù),能夠智能檢測當(dāng)前水印,重建水印,同時提供反批量去除水印技術(shù)。
3. 分發(fā),基于前述的視頻結(jié)構(gòu)化和智能分析,視頻內(nèi)容可按照多維度進(jìn)行存儲,結(jié)合用戶行為日志分析,支持快速檢索和關(guān)聯(lián)推薦,將內(nèi)容以最快的速度推送到最相關(guān)的用戶。
4. 消費(fèi),在用戶消費(fèi)視頻的過程中,華為云EI提供自動評論及交互播放技術(shù)方案,提升終端用戶體驗(yàn)。
目前,華為云EI在視頻分析領(lǐng)域全面展開深入研究和新技術(shù)開發(fā),已經(jīng)與視頻服務(wù)商華為視頻、在線視頻、短視頻娛樂、泛娛樂直播等互聯(lián)網(wǎng)及廣電行業(yè)深入合作,共同為客戶提供一站式智能視頻分析解決方案和技術(shù),提升客戶視頻全生命流程處理能力,為客戶減少運(yùn)營成本,助力客戶快速、全面進(jìn)入視頻智能時代。