自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

愛(ài)奇藝許立劍:分布式計(jì)算Mesos框架和應(yīng)用

數(shù)據(jù)庫(kù) 分布式
愛(ài)奇藝高級(jí)工程師許立劍分享分布式計(jì)算Mesos框架和應(yīng)用,中科院軟件所工程師李明宇分享關(guān)于視頻編碼與存儲(chǔ)的設(shè)想,與大家共同探討視頻網(wǎng)站背后的技術(shù)架構(gòu)發(fā)展。

視頻網(wǎng)站已經(jīng)深深地走入了每個(gè)人的生活,并成為一種重要的內(nèi)容傳播平臺(tái),但是從事互聯(lián)網(wǎng)行業(yè)的人會(huì)更清楚這一點(diǎn),如果沒(méi)有相應(yīng)的技術(shù)支撐,即使有再好的想法和再好的內(nèi)容,也很難變現(xiàn)為可行的平臺(tái)和商業(yè)模式,對(duì)于中國(guó)互聯(lián)網(wǎng)視頻行業(yè)而言,無(wú)論是三網(wǎng)融合的契機(jī),還是移動(dòng)互聯(lián)網(wǎng)的未來(lái),對(duì)相關(guān)技術(shù)的重視都是發(fā)展的基礎(chǔ)。

劉文峰:分布式計(jì)算Mesos框架和應(yīng)用愛(ài)奇藝高級(jí)工程師許立劍

愛(ài)奇藝高級(jí)工程師許立劍在活動(dòng)中對(duì)Mesos進(jìn)行了介紹,Mesos2009年誕生于伯克利AMPlab,用于構(gòu)建和運(yùn)行其他分布式系統(tǒng)的分布式系統(tǒng),可以毫不費(fèi)力得支撐3萬(wàn)臺(tái)服務(wù)器。Mesos廣泛應(yīng)用于Twitter、eBay、Vimeo等公司,支持Hadoop、Spark、Storm、Jenkins、Marathon、Chronos等多種框架,同時(shí)支持自行構(gòu)建架構(gòu),例如視頻轉(zhuǎn)碼。

Mesos在愛(ài)奇藝中的使用是從2013年7月開(kāi)始初步調(diào)研,至今已經(jīng)上線Hadoop、Spark等框架,并自行開(kāi)發(fā)上線了分布式視頻轉(zhuǎn)碼框架。在上海,北京,重慶三地近200臺(tái)服務(wù)器,讓很多地方看到了Mesos的可利用性,完成視頻轉(zhuǎn)碼任務(wù)達(dá)到1000萬(wàn)以上,Storm、Marathon、Chronos、分布式爬蟲(chóng)等框架測(cè)試并陸續(xù)上線中。

在本次講解中,許立劍拿OpenStack與Mesos進(jìn)行了對(duì)比,突出了Mesos的優(yōu)點(diǎn)。

劉文峰:分布式計(jì)算Mesos框架和應(yīng)用

從圖中可以很清楚的看到Mesos的優(yōu)勢(shì)很明顯,用更少的物理機(jī),無(wú)需管理虛擬機(jī),就可以很輕松的完成視頻轉(zhuǎn)碼和計(jì)算任務(wù)。

同時(shí)在活動(dòng)上許立劍還闡述了靜態(tài)資源規(guī)劃的弊端,難以共享數(shù)據(jù),難以彈性地分配資源,難以充分利用資源,難以處理服務(wù)器失敗。從他的角度為大家很好的概述了以上的情況。

責(zé)任編輯:彭凡 來(lái)源: 置頂網(wǎng)
相關(guān)推薦

2015-07-22 12:53:55

羅生門式

2010-06-03 19:46:44

Hadoop

2023-06-05 07:36:30

數(shù)據(jù)湖大數(shù)據(jù)架構(gòu)

2021-12-13 11:07:10

鴻蒙HarmonyOS應(yīng)用

2024-03-01 09:53:34

2017-09-01 05:35:58

分布式計(jì)算存儲(chǔ)

2015-08-03 13:12:43

分布式計(jì)算Mesos新版本特性

2012-07-18 09:29:14

愛(ài)奇藝Windows Pho

2022-06-10 15:37:24

愛(ài)奇藝App網(wǎng)絡(luò)

2021-01-08 13:42:28

愛(ài)奇藝機(jī)器學(xué)習(xí)深度學(xué)習(xí)

2015-10-15 14:05:51

StormSparkMapReduce

2015-07-23 14:50:54

2022-07-22 15:31:45

愛(ài)奇藝?視頻內(nèi)容延遲敏感

2012-09-19 14:09:20

Hadoop開(kāi)源

2013-03-26 13:43:08

Java分布式計(jì)算

2021-09-09 15:45:17

機(jī)器學(xué)習(xí)人工智能Ray

2023-06-26 00:14:28

Openjob分布式任務(wù)

2016-12-23 14:03:40

華為愛(ài)奇藝

2018-12-27 13:11:04

愛(ài)奇藝APP優(yōu)化

2023-08-11 07:44:09

大數(shù)據(jù)數(shù)據(jù)分析
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)