【51CTO.com原創(chuàng)稿件】醫(yī)生和患者之間利用音視頻進行遠程診療，在門禁門鈴上通過遠程音視頻對來訪者進行錄像和開關門操作，在機器人或其他智能家居上通過音視頻通信模塊實現(xiàn)對親人的遠程陪護，通過線上一對一陪練的方式進行音樂教育…這些在以前看似不可思議的場景，現(xiàn)在都已經真實存在了，而這一切都得益于音視頻為用戶帶來的溝通便捷性。

網易云信在音視頻方面耕耘數(shù)十年，在技術與市場方面積累了大量經驗。近日，51CTO對網易云信多媒體資深技術架構師吳桐進行了專訪，就音視頻通訊領域的技術和市場進行了深入探討。

采訪伊始，吳桐介紹了網易云信音視頻近期的一個成功案例：VIP 陪練。VIP陪練的模式是，一端連接在家練琴的學生，另一端連接陪練的老師，老師對學生進行遠程的練習指導。音樂教育的特殊性決定了其技術開發(fā)和功能部署是一個專門化的細分領域，而音視頻技術作為在線教育模式的核心底層技術是需攻破的首要“堡壘”。在線音樂創(chuàng)新領軍平臺VIP陪練依托于網易云信的解決方案，實現(xiàn)的在線一對一陪練模式是當下在線音樂平臺打破音視頻技術瓶頸，實現(xiàn)教學模式創(chuàng)新的典范。

完整的技術能力

音視頻研發(fā)看起來很酷，但是技術開發(fā)上卻有著重重難關要過。談到這些年網易云信在音視頻研發(fā)領域遇到的困難，吳桐表示，音視頻研發(fā)包括客戶端和服務端，而客戶端的終端設備種類繁多，這些終端設備底層的音視頻硬件的標準不一致，這就要在終端的適配方面做大量工作?；芈曄?、用戶的接入效果等都是網易云信音視頻曾經遇到過的難題。

網易云信音視頻有著一整套的專業(yè)技術開發(fā)，包括連麥、群聊、快聊等具體的聊天模式的技術能力，以及各類基于各種場景需求的溝通模式的技術能力。并且，網易云信音視頻在采集、編碼、傳輸、解碼、渲染等各環(huán)節(jié)均有著專業(yè)的技術能力，可以確保各類機型的匹配、音視頻技術的兼容，以避免高并發(fā)、弱網等復雜環(huán)境下出現(xiàn)延時、卡頓、丟包等現(xiàn)象。

WebRTC的進一步優(yōu)化：NRTC

WebRTC使一直封閉和高端的實時音視頻通信領域受到了不小的沖擊。開發(fā)者可以以相對較少的成本或免費就能為自己的應用和設備加入遠程音視頻通話和協(xié)作的功能，尤其是在社交通信、企業(yè)協(xié)作、在線教育、在線醫(yī)療、智能家居、車聯(lián)網這些行業(yè)，更能通過音視頻通話能力的應用開拓更多的應用場景和領域，

WebRTC在Web端雖然有著諸多優(yōu)勢，但是作為一項開源技術，WebRTC并不***。例如，面臨低帶寬、高并發(fā)、高丟包等復雜的網絡環(huán)境時，WebRTC通常都無法保證信息的傳輸質量。還有可能由于WebRTC的適配問題導致用戶無法連麥，或者用戶在音視頻通話過程中頻繁出現(xiàn)回聲、嘯叫等情況。如何更好地優(yōu)化WebRTC，從而為用戶帶來更高效的音視頻通訊應用也成為關鍵。

網易云信自研的全功能工業(yè)級的音視頻技術框架NRTC(NETEASE Real-Time Communication)，是網易云信基于多年音視頻研發(fā)經驗形成的全面、靈活、易用的工程化解決方案，其目標就是降低音視頻功能開發(fā)門檻，幫助用戶實現(xiàn)便捷化、快速化開發(fā)和部署。

在技術上，NRTC是同時適應于Web和Server開發(fā)的完整的解決方案，可幫助用戶實現(xiàn)多點音視頻通信。在功能上，NRTC提供了包括直播、音視頻通話等在內的多元化的音視頻通信功能。在應用場景上，NRTC可面向音視頻交友、在線教學等多種場景，提供有專門的解決方案。NRTC以全面的技術、功能和場景應用，幫助用戶切實降低音視頻開發(fā)門檻。

NRTC在傳輸端采用私有協(xié)議，保障了音視頻通信功能在開發(fā)過程中能靈活應對業(yè)務需求、開發(fā)環(huán)境的要求。此外，基于傳輸層私有協(xié)議，用戶可以很容易的擴展媒體包，無需遵循太多開源技術規(guī)定的標準，可基于實際情況做簡化和優(yōu)化。

依托簡單易用的SDK，NRTC真正實現(xiàn)了音視頻研發(fā)的工程化，讓音視頻開發(fā)用易用的開發(fā)工具即能實現(xiàn)多元化的功能部署。

目前，網易云信已經為網易云音樂、網易云課堂、網易新聞、網易有道等眾多網易產品提供全套實時音視頻技術方案及支撐，同時也為諸多的游戲以及妙克VIP陪練等接入了音視頻功能，使用戶輕松實現(xiàn)線上實時問診、視頻陪練等。

吳桐總結說，WebRTC的核心優(yōu)勢就是在Web端可以做成一個免插件的接入。今后，WebRTC必將在教育、醫(yī)療等場景下有越來越多的應用。

目標清晰，擁抱未來

談到網易云信音視頻未來的發(fā)展，吳桐明確表示，有以下三個方向。

1. 在流暢度和清晰度上下功夫。

流暢度和清晰度是實時音視頻領域永遠的核心。網易云信音視頻必將投入足夠的人力、物力在這個方面繼續(xù)耕耘，讓音視頻更流暢、更高清。

2. 適配更多的垂直類客戶應用場景

實時音視頻的應用場景越來越多、越來越細，要想在市場長久立足，就需要去主動適配更多的垂直應用場景，使用戶在自己特定的領域更好的使用音視頻。

3. 更多的調研和嘗試

前沿技術不斷涌現(xiàn)，AI、VR…等等，這些前沿技術與音視頻的結合，是網易云信音視頻未來調研和嘗試的方向。

【記者視點】

隨著直播授課進入教育行業(yè)，直播答題進入廣電行業(yè)，音視頻技術的創(chuàng)新已經到了風口浪尖，帶來了***機遇，而機遇就意味著挑戰(zhàn)。音視頻行業(yè)的標準正隨著數(shù)字化進程飛速發(fā)展，行業(yè)產業(yè)鏈逐漸成熟，分工也更加細化。在如今競爭激烈的市場中，唯有夯實基礎，在場景中千錘百煉，才能立于不敗之地。

嘉賓介紹

[[230035]]

吳桐，網易云信多媒體資深技術架構師。浙江大學碩士畢業(yè)，加入網易后深度參與了網易UU網游加速器、易信、網易云信等項目?，F(xiàn)任網易云信流媒體服務器組技術負責人，負責實時音視頻、互動白板、直播、互動直播與WebRTC網關等項目的架構設計與研發(fā)，對音視頻、高性能服務器以及網絡通訊等領域均有多年的工作與項目經驗。

【51CTO原創(chuàng)稿件，合作站點轉載請注明原文作者和出處為51CTO.com】