自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

春晚紅包“如絲般順滑”體驗背后,百度技術(shù)到底有多強(qiáng)

云計算
4月4日,以“揭秘春晚紅包背后的技術(shù)”為主題的第七屆百度技術(shù)開放日舉行。一如往年,開放日現(xiàn)場十分火爆,吸引了來自英特爾、IBM、清華、北航、北科大等產(chǎn)學(xué)研用機(jī)構(gòu)的專家、學(xué)者和技術(shù)愛好者,500余人的會場座無虛席,過道也站滿了人。

今天,有一群程序員像往常一樣穿梭在西二旗的地鐵,不一樣的是他們在奔赴一場大咖分享、硬通貨十足的“技術(shù)盛宴”。 4月4日,以“揭秘春晚紅包背后的技術(shù)”為主題的第七屆百度技術(shù)開放日舉行。一如往年,開放日現(xiàn)場十分火爆,吸引了來自英特爾、IBM、清華、北航、北科大等產(chǎn)學(xué)研用機(jī)構(gòu)的專家、學(xué)者和技術(shù)愛好者,500余人的會場座無虛席,過道也站滿了人。

[[261534]]

百度高級副總裁、AI技術(shù)平臺體系(AIG)和基礎(chǔ)技術(shù)體系(TG)總負(fù)責(zé)人王海峰

春晚紅包項目對百度而言是一次大考,背后是強(qiáng)大的技術(shù)積累。現(xiàn)場,百度高級副總裁、AI技術(shù)平臺體系(AIG)和基礎(chǔ)技術(shù)體系(TG)總負(fù)責(zé)人王海峰在致辭中表示,“春晚紅包項目的成功,是百度綜合技術(shù)實力的成功,是多年來在云計算、大數(shù)據(jù)、人工智能等多方面的技術(shù)積累,以及春節(jié)前一個多月時間大家共同努力的成果。百度在積累和提升技術(shù)實力的同時,也致力于技術(shù)的平臺化。我們所有的技術(shù)不僅僅要滿足特定產(chǎn)品的業(yè)務(wù)需求,也要把平臺化做得更好。我們整合基礎(chǔ)技術(shù)體系和AI技術(shù)平臺體系,打造百度在AI時代的技術(shù)平臺,加強(qiáng)平臺化當(dāng)中技術(shù)平臺的能力。這樣的話,百度的技術(shù)一方面更加靈活高效地服務(wù)于百度自己的業(yè)務(wù),同時我們也希望把這些技術(shù)與社會各界,尤其是我們的合作伙伴、開發(fā)者朋友以及學(xué)術(shù)界分享,我們一起推動技術(shù)的進(jìn)步,也推動社會的進(jìn)步。”

技術(shù)分享環(huán)節(jié),侯震宇率先為在場觀眾詳解保障整場春晚項目不宕機(jī)的技術(shù)“頂層設(shè)計”。他指出在時間短、技術(shù)難、場景復(fù)雜、要求高四大挑戰(zhàn)的情況下,百度春晚搶紅包環(huán)節(jié)的流暢進(jìn)行,得益于百度全系統(tǒng)全鏈路的優(yōu)化設(shè)計、優(yōu)良技術(shù)積累的護(hù)航、以及大規(guī)模工程能力的保障。

百度
百度副總裁 侯震宇

百度技術(shù)委員會理事長陳尚義表示,技術(shù)開放日始于2012年,是百度與合作伙伴、開發(fā)者、學(xué)術(shù)和產(chǎn)業(yè)研究機(jī)構(gòu)之間的交流平臺。

[[261535]]
百度技術(shù)委員會理事長陳尚義

全系統(tǒng)全鏈路的優(yōu)化設(shè)計:整體架構(gòu)設(shè)計與優(yōu)化、統(tǒng)一前端接入優(yōu)化、極端并發(fā)的數(shù)據(jù)庫優(yōu)化

春晚極端并發(fā)場景是對技術(shù)實力最高級別的檢驗。春晚直播期間,數(shù)億用戶參與互動,每秒鐘千萬級并發(fā)請求,全球觀眾參與百度春晚紅包互動次數(shù)達(dá)208億?;诖耍俣仍谶@次春晚紅包項目架構(gòu)設(shè)計中采用的是以大化小、隔離、彈性、智能、動態(tài)、自愈,同時高效控制總成本的設(shè)計理念。

[[261536]]


在架構(gòu)設(shè)計方面,百度架構(gòu)師及工程師將整體系統(tǒng)拆解成四大業(yè)務(wù)系統(tǒng)和大量基礎(chǔ)設(shè)施與服務(wù)。為了提升觀眾參與的質(zhì)量,百度提出了多項具有針對性的優(yōu)化方案。在春晚紅包環(huán)節(jié),觀眾可以通過搖一搖、信息流、視頻、語音、搜索等多樣化形式參與。

除了這些基本的架構(gòu)設(shè)計與優(yōu)化外,還有統(tǒng)一前端接入優(yōu)化、安全防攻擊、資源協(xié)調(diào)和動態(tài)調(diào)度能力,全鏈路壓測與攻防,以及內(nèi)測、預(yù)案與劇本等關(guān)鍵技術(shù)和方案,才保證了春晚“如絲般順滑”的搖紅包體驗。

據(jù)介紹,BFE(百度統(tǒng)一前端)是百度統(tǒng)一的七層流量轉(zhuǎn)發(fā)平臺。在春晚紅包項目中,BFE是IDC流量的統(tǒng)一入口,提供流量調(diào)度、接入轉(zhuǎn)發(fā)、限流、應(yīng)用層防火墻等能力。每日轉(zhuǎn)發(fā)請求數(shù)接近1萬億?;贐FE的快速開發(fā)能力,可以通過將部分業(yè)務(wù)邏輯前置到BFE,降低了整體的系統(tǒng)開銷。同時基于自研專用流式計算系統(tǒng),提供實時報表能力,在億級別流量下可以實時反饋系統(tǒng)狀況。

在春晚紅包活動中,數(shù)據(jù)庫服務(wù)處于業(yè)務(wù)鏈路的最底層,具有相當(dāng)重要的作業(yè),對其穩(wěn)定性、可靠性及并發(fā)能力提出了更高的要求和需求。百度DBA十多年的探索和沉淀,形成的完整的數(shù)據(jù)庫技術(shù)體系和解決方案,從架構(gòu)上完美適配春晚項目的業(yè)務(wù)需求,通過set化等關(guān)鍵技術(shù)方案,達(dá)到對業(yè)務(wù)透明且靈活擴(kuò)展、故障最小化隔離能力;在流量管控上,基于流量畫像能力,結(jié)合安全檢測及攔截能力、多維度多層級流控能力,達(dá)到對整體服務(wù)的過載保護(hù)和安全防護(hù)能力,能有效保障整體服務(wù)的可用性、數(shù)據(jù)的安全性,達(dá)到數(shù)據(jù)庫千萬級QPS處理能力;最后結(jié)合近百項的劇本及自動監(jiān)控預(yù)案措施,進(jìn)一步加固了春晚數(shù)據(jù)庫服務(wù)保障能力,助力春晚活動順利進(jìn)行。

優(yōu)良技術(shù)積累的護(hù)航:服務(wù)的混部調(diào)度、彈性的資源供給、極速穩(wěn)定的CDN服務(wù)

春晚期間,億級別用戶同時啟動,上億的用戶同時與百度云服務(wù)發(fā)起建連;相較于以往簡單的搖一搖,這次用戶同時訪問的業(yè)務(wù)覆蓋搜索、推薦、語音、視頻等復(fù)雜業(yè)務(wù)。兩周時間內(nèi)要實現(xiàn)數(shù)萬級別規(guī)模服務(wù)器的資源快速籌備與使用方案制定。

技術(shù)方案上,重點通過百度云集群內(nèi)部全混部,利用集群流轉(zhuǎn)支持,滿足春晚活動資源需求?;觳空{(diào)度意味著選擇合適資源,部署合適任務(wù),并做好安全的隔離與服務(wù)保護(hù)機(jī)制。百度春晚活動服務(wù)混部調(diào)度采用BestEffort(BE)模式,彈性使用全百度云的集群資源。BE模式對原正常業(yè)務(wù)實現(xiàn)了無侵入使用,滿足了春晚服務(wù)提前進(jìn)場與快速便捷退場的需求,順利通過了活動的多輪壓測工作與最終線上的效率與質(zhì)量考驗。同時圍繞潛在問題場景,設(shè)計了秒級彈性伸縮的方案,為潛在的未知春晚力量做足萬全準(zhǔn)備。

百度云的媒體云平臺是一個涵蓋了視頻/圖片類數(shù)據(jù)的采集、生產(chǎn)、上傳、存儲、處理、分發(fā)、播放的一體基礎(chǔ)設(shè)施云平臺,具備國內(nèi)最大的萬億文件千P數(shù)據(jù)的存儲、每天千萬級媒資處理、數(shù)百節(jié)點50T+帶寬的分發(fā)網(wǎng)絡(luò)和一站式智能視頻解決方案。

[[261537]]

大規(guī)模工程能力的保障:高效的工程能力、自動化、自助化壓測平臺、全要素鏈路壓測與攻防

春晚紅包項目涉及數(shù)十個產(chǎn)品和平臺,110+種場景,280+個預(yù)案,百余團(tuán)隊參與,上千人協(xié)同,平均每天新增需求和任務(wù)千余個,自動化測試上萬次。在如此大規(guī)模協(xié)同開發(fā)的挑戰(zhàn)下,春晚紅包項目能夠高效、高質(zhì)量交付,離不開百度長期積累的技術(shù)文化和工程能力、集團(tuán)統(tǒng)一的工程標(biāo)準(zhǔn)和研發(fā)規(guī)范、可靠高效的開發(fā)工具和協(xié)作平臺。同時百度發(fā)布了《百度方法+白皮書》、《百度工程能力白皮書》,并開放了“百度效率云”DevOps工具平臺,與業(yè)界共享工程能力建設(shè)經(jīng)驗,共同推進(jìn)工程效能的提升。

再好的架構(gòu)設(shè)計,也需要上戰(zhàn)場真實規(guī)模演練,絕不能讓系統(tǒng)未經(jīng)驗證而直面用戶。春晚藍(lán)軍就是這樣一支隊伍,負(fù)責(zé)為春晚系統(tǒng)制造各種麻煩。首當(dāng)其沖的就是全要素全鏈路壓測,用來模擬真實用戶行為,構(gòu)造大于春晚極限并發(fā)的壓力洪峰,驗證從供電、網(wǎng)絡(luò)等基礎(chǔ)設(shè)施,到上層軟件架構(gòu)的服務(wù)能力。據(jù)介紹,壓測的核心是要摒棄正向思維模式,強(qiáng)調(diào)機(jī)械的覆蓋與驗證,不放過任何一個“絕對不會出問題”的環(huán)節(jié)。與此同時,為了驗證春晚系統(tǒng)應(yīng)對異常的能力,百度主動構(gòu)造隨機(jī)異常?;趯Ω呖捎眉軜?gòu)的豐富經(jīng)驗,百度架構(gòu)師專門選取系統(tǒng)的“七寸”發(fā)起主動攻擊,來驗證系統(tǒng)的架構(gòu)容災(zāi)能力和應(yīng)急指揮機(jī)制。

不難看出,百度多方面聯(lián)動以技術(shù)之力在春晚“戰(zhàn)場”打了漂亮的一仗。去年12月,百度宣布將基礎(chǔ)架構(gòu)、集團(tuán)級共享平臺、運維等整合到“TG”(基礎(chǔ)技術(shù)體系),希望能夠集中核心技術(shù)優(yōu)勢,打造AI時代最領(lǐng)先的技術(shù)平臺,實現(xiàn)前端業(yè)務(wù)和技術(shù)平臺資源高效統(tǒng)籌及全面協(xié)同,強(qiáng)化集中資源“打大仗、打硬仗”的能力。百度架構(gòu)調(diào)整后的成果,已在春晚舞臺上得到了最好的驗證。

未來,技術(shù)開放日將持續(xù)為各界技術(shù)關(guān)注者帶來最新的技術(shù)進(jìn)展,希望與大家共享百度的技術(shù)創(chuàng)新,共同推動技術(shù)進(jìn)步。

 

責(zé)任編輯:趙立京 來源: 51CTO
相關(guān)推薦

2020-12-30 05:29:48

API分庫分表

2021-03-18 17:32:29

抖音紅包技術(shù)

2017-06-05 10:01:24

互聯(lián)網(wǎng)

2016-07-25 13:26:40

大型機(jī)大機(jī)IBM

2013-08-16 11:26:56

2019-02-01 08:28:42

春晚紅包百度紅包流量

2013-08-26 09:15:38

百度輕應(yīng)用

2020-09-28 12:34:38

Python代碼開發(fā)

2023-02-09 08:57:11

Callable異步java

2019-02-15 10:11:23

2022-07-18 09:56:16

AI推薦搜索

2022-07-20 10:09:15

AIAISummit智能搜索

2012-03-23 12:12:37

百度開發(fā)者大會

2019-01-31 14:30:07

紅包微信紅包支付寶

2013-01-31 09:15:08

偷拍插件美杜莎

2009-08-31 08:42:31

Windows 7微軟因特爾合作

2021-01-28 06:07:32

百度搜索搜索引擎 應(yīng)用

2014-07-25 17:12:39

數(shù)據(jù)庫WOT2014MongoDB

2013-08-22 17:08:50

2020-06-20 17:55:01

百度
點贊
收藏

51CTO技術(shù)棧公眾號