云計(jì)算經(jīng)過幾年的飛速發(fā)展，已經(jīng)成為IT領(lǐng)域未來重要的趨勢(shì)之一。云時(shí)代IT領(lǐng)域各種問題，都在逐漸通過整個(gè)行業(yè)的智慧形成統(tǒng)一的解決方案。也正因如此，唱衰運(yùn)維的調(diào)調(diào)一直不絕于耳。當(dāng)代表運(yùn)維價(jià)值的苦力活被程序代替，甚至比人做得更好時(shí)，運(yùn)維人員該去向何方？

在WOT2016 互聯(lián)網(wǎng)運(yùn)維與開發(fā)者大會(huì)現(xiàn)場(chǎng)，51CTO記者獨(dú)家專訪騰訊社交網(wǎng)絡(luò)運(yùn)營(yíng)部助理總經(jīng)理、技術(shù)運(yùn)營(yíng)通道會(huì)長(zhǎng)趙建春。作為一個(gè)有著十年經(jīng)驗(yàn)的運(yùn)維老兵，在他眼里運(yùn)維的分工和理念有哪些變化？如何實(shí)現(xiàn)云時(shí)代的高效運(yùn)維？企業(yè)未來還是否需要專業(yè)的運(yùn)維管理團(tuán)隊(duì)呢？

嘉賓簡(jiǎn)介：

[[165297]]

趙建春，騰訊社交網(wǎng)絡(luò)運(yùn)營(yíng)部助理總經(jīng)理、技術(shù)運(yùn)營(yíng)通道會(huì)長(zhǎng)、專家工程師。04年加入騰訊，先后從事過研發(fā)、運(yùn)維、數(shù)據(jù)方面的建設(shè)和管理工作，在海量技術(shù)運(yùn)營(yíng)方面積累了豐富的實(shí)戰(zhàn)經(jīng)驗(yàn)。

騰訊社區(qū)網(wǎng)絡(luò)運(yùn)維團(tuán)隊(duì)主要負(fù)責(zé)以QQ延伸出來的各種社群的運(yùn)維和維護(hù)，包括QQ空間、QQ音樂、QQ會(huì)員、QQ秀等一系列的QQ產(chǎn)品。整個(gè)團(tuán)隊(duì)成員不到90人，卻維護(hù)著將近10萬臺(tái)服務(wù)器。在經(jīng)歷了多次重大事件及活動(dòng)的考驗(yàn)和洗禮后，趙建春深刻感受到，運(yùn)維團(tuán)隊(duì)最最重要的職責(zé)就是保證系統(tǒng)的穩(wěn)定、可靠，而不是做一名救火隊(duì)員。在可靠這件事解決之后，上才有更多時(shí)間提升整個(gè)運(yùn)維工作的效率。

高效運(yùn)維的兩大理念

談到高效運(yùn)維，趙建春最喜歡拿建筑行業(yè)做對(duì)比。在他看來，建筑行業(yè)是人類歷史上一直存在的一項(xiàng)工作。發(fā)展到今天，搭建一個(gè)高樓就像搭積木一樣，能在短時(shí)間內(nèi)迅速完成。這個(gè)過程實(shí)際做了大量的細(xì)分工作，每一個(gè)團(tuán)隊(duì)都會(huì)把自己負(fù)責(zé)的，自己擅長(zhǎng)的工作做到極致，做到最高效，最終交由設(shè)計(jì)師設(shè)計(jì)，拼裝起來就完成了。這對(duì)于運(yùn)維領(lǐng)域也是一個(gè)很好的啟發(fā)。

• 專業(yè)領(lǐng)域細(xì)分

趙建春所在的團(tuán)隊(duì)對(duì)接入運(yùn)維、邏輯運(yùn)維、存儲(chǔ)運(yùn)維和業(yè)務(wù)運(yùn)維的工作職責(zé)進(jìn)行了明確的劃分。在接入運(yùn)維、邏輯運(yùn)維和存儲(chǔ)運(yùn)維層面，通過專業(yè)的分式方式讓團(tuán)隊(duì)每位成員都聚焦到更加細(xì)分的技術(shù)領(lǐng)域，把相應(yīng)的工作做到更精更細(xì)更深。對(duì)于業(yè)務(wù)運(yùn)維這部分，則是用一些對(duì)業(yè)務(wù)理解能力較好，協(xié)調(diào)能力較強(qiáng)的同事去對(duì)業(yè)務(wù)進(jìn)行一些支撐及更多的溝通，更加專注于一些大的目標(biāo)實(shí)現(xiàn)的事情，同時(shí)做一些優(yōu)化的工作。

• 減少運(yùn)維對(duì)象

具體到運(yùn)維管理層面，趙建春一直強(qiáng)調(diào)的一個(gè)重要理念就是減少運(yùn)維對(duì)象。運(yùn)維其實(shí)管理挺復(fù)雜的一塊事情，一定要對(duì)內(nèi)容和分析做一個(gè)清晰的邊界劃分，有一個(gè)比較好的分類，分類以后把每一類東西進(jìn)行標(biāo)準(zhǔn)化建設(shè)和改造。具體來說，就是把服務(wù)器類型、機(jī)房數(shù)量、QA流程、容錯(cuò)架構(gòu)、軟件架構(gòu)等都看成是抽象的、需要運(yùn)維去管理的“對(duì)象”，對(duì)象越少，運(yùn)維人員就越能深入和全面地掌握這些對(duì)象。這種尋找、合并同類項(xiàng)的過程，也是專業(yè)細(xì)分的一種手段。只有以上兩點(diǎn)作為基礎(chǔ)，才能談到實(shí)現(xiàn)高效運(yùn)維。

大規(guī)模海量服務(wù)運(yùn)維實(shí)踐

趙建春講到，維護(hù)海量服務(wù)時(shí)，出現(xiàn)的故障必須得到服務(wù)器及時(shí)的處理，不能影響項(xiàng)目服務(wù)。容錯(cuò)方案就成為決定系統(tǒng)運(yùn)維成敗的第一步。我們寫出來的程序和代碼、運(yùn)行的實(shí)例都是運(yùn)維團(tuán)隊(duì)需要管理的資源。那么我們能不能對(duì)每個(gè)資源都定義一種形狀，然后進(jìn)行搭建？

• 統(tǒng)一框架CMDBA

將某一業(yè)務(wù)模塊上所有依賴的資源全部登記進(jìn)該統(tǒng)一框架。通過高效的監(jiān)控手段、容量管理等方式進(jìn)行快速?zèng)Q策和調(diào)度。

• L5系統(tǒng)

集容錯(cuò)、負(fù)載均衡、路由、灰度監(jiān)控能力于一身的容錯(cuò)方案。 L5系統(tǒng)類似于DNS，底下有一排能提供的服務(wù)模塊，通過L5和DNS、L5和Agent兩個(gè)環(huán)節(jié)解決單點(diǎn)問題，并達(dá)到容錯(cuò)和負(fù)載均衡的作用。

• 統(tǒng)一框架和架構(gòu)

將整個(gè)網(wǎng)絡(luò)通訊列成一個(gè)標(biāo)準(zhǔn)框架， 業(yè)務(wù)邏輯部分以SO動(dòng)態(tài)庫方式編寫，與框架分離部署，類似WEB服務(wù)器上的CGI。接入層用QZHTTP，邏輯層是SPP和SF的框架?？蚣艿慕y(tǒng)一大大減少了運(yùn)維成員學(xué)習(xí)的成本。實(shí)現(xiàn)了統(tǒng)一維護(hù)，極大提高通訊效率。

• 動(dòng)態(tài)資源管理

騰訊在十多年的發(fā)展過程中積累了很多應(yīng)對(duì)海量方面的成熟經(jīng)驗(yàn)。其中就包括騰訊云的CDN。騰訊有十億以上的用戶，遍布在全國(guó)各地，為了讓所有的用戶訪問資源更加快和近，騰訊將其做了超過500個(gè)節(jié)點(diǎn)，部署在離用戶最近的點(diǎn)上，把資源分發(fā)到離用戶近的地方。當(dāng)出現(xiàn)訪問壓力時(shí)，騰訊云可以通過對(duì)用戶就近接入的物流策略進(jìn)行動(dòng)態(tài)的調(diào)度，讓用戶訪問就近的節(jié)點(diǎn)減少壓力。資源在分發(fā)時(shí)也會(huì)進(jìn)行一個(gè)預(yù)先的推送，或者預(yù)拉取，防止在訪問的時(shí)候出現(xiàn)集中式的拉取資源的方式。

另外，騰訊云在全國(guó)上海、天津、深圳部署有QQ整體后臺(tái)的接入點(diǎn)，可以讓用戶進(jìn)行跨地域的分布，從而解決高并發(fā)訪問時(shí)的資源調(diào)度問題。

第三，騰訊云會(huì)對(duì)訪問的整個(gè)鏈路進(jìn)行分析，防止每次大的訪問量從前到后穿到整個(gè)鏈條上，而是會(huì)訪問到局部的模塊，來解決這些問題。

未來小公司的專業(yè)運(yùn)維將逐漸消失

在采訪最后趙建春談到，云計(jì)算會(huì)變成未來的超級(jí)標(biāo)準(zhǔn)。從另外一個(gè)角度說，云計(jì)算就是IT產(chǎn)業(yè)的運(yùn)維平臺(tái)，無論是傳統(tǒng)行業(yè)、創(chuàng)業(yè)者還是互聯(lián)網(wǎng)公司，都會(huì)在這個(gè)平臺(tái)上進(jìn)行整個(gè)業(yè)務(wù)的運(yùn)作，而不是把精力消耗在在基礎(chǔ)設(shè)施的維護(hù)和管理上。

像騰訊云服務(wù)經(jīng)過過去幾年發(fā)展，尤其是去年表現(xiàn)出翻倍式增長(zhǎng)，在全球已有50家數(shù)據(jù)中心，提供500家數(shù)據(jù)加速節(jié)點(diǎn)，超過10T整體帶寬，4T防DDOS攻擊能力，700萬+域名提供解析等公有云服務(wù)。近期，騰訊云也發(fā)布了新的戰(zhàn)略，推出“黑石”新品并公布出海計(jì)劃，不斷演進(jìn)解決方案，提高服務(wù)能力。

所以對(duì)于小型公司來說，可能專業(yè)的運(yùn)維將會(huì)慢慢消失，開發(fā)的人直接使用云計(jì)算的服務(wù)運(yùn)維。而對(duì)于那些規(guī)模比較大的公司，租用的服務(wù)器比較多，涉及到一些混合云的方案，還是需要一定的管理人員，但是需求量不會(huì)像原來那么大。

未來是全面擁抱云的時(shí)代，對(duì)于運(yùn)維人員來說，一定要建立學(xué)習(xí)云和使用云的意識(shí)，去主動(dòng)擁抱云，適應(yīng)云時(shí)代的運(yùn)維需求。