自動(dòng)化運(yùn)維在中交興路的應(yīng)用
原創(chuàng)【51CTO專(zhuān)稿】在人們的印象中，只有大型的互聯(lián)網(wǎng)企業(yè)（如：百度、新浪、淘寶等）才能用到自動(dòng)化運(yùn)維部署，其實(shí)不然，現(xiàn)在很多其他類(lèi)型的企業(yè)也在運(yùn)用自動(dòng)化運(yùn)維部署這一技術(shù)。立足于交通行業(yè)，營(yíng)運(yùn)車(chē)輛監(jiān)控管理和服務(wù)為基礎(chǔ)，專(zhuān)業(yè)從事交通信息化領(lǐng)域的技術(shù)研發(fā)、解決方案提供、運(yùn)營(yíng)服務(wù)和相關(guān)增值服務(wù)于一體的全國(guó)性綜合交通信息服務(wù)提供商北京中交興路信息科技有限公司便是如此。
中交興路走向自動(dòng)化運(yùn)維之路
為了了解自動(dòng)化運(yùn)維在中交興路的應(yīng)用情況，記者專(zhuān)程采訪(fǎng)了中交興路負(fù)責(zé)運(yùn)維自動(dòng)化軟件開(kāi)發(fā)領(lǐng)域的運(yùn)維工程師鄧?yán)冢?a target="_blank" >博客）。談到以前的傳統(tǒng)運(yùn)維的經(jīng)歷，鄧?yán)诶蠋煵唤锌环?ldquo;傳統(tǒng)運(yùn)維主要通過(guò)手動(dòng)或者寫(xiě)腳本方式來(lái)進(jìn)行維護(hù)、升級(jí)、上線(xiàn)應(yīng)用平臺(tái)，在工作的時(shí)候，沒(méi)有更新與修改的日志，都是研發(fā)對(duì)平臺(tái)有了最新的版本，運(yùn)維就得升級(jí)，有的時(shí)候不知道升級(jí)什么內(nèi)容，如果升級(jí)的次數(shù)過(guò)多，間隔過(guò)短，都不知道修改與升級(jí)了什么，一旦出現(xiàn)事故，就會(huì)有相當(dāng)長(zhǎng)的時(shí)間來(lái)解決此問(wèn)題。
相對(duì)于傳統(tǒng)的運(yùn)維而言，自動(dòng)化運(yùn)維有很多優(yōu)勢(shì)，以下三個(gè)方面更為突出：
（1）有記錄可循：比如使用Svn進(jìn)行版本控制，一旦新版本出現(xiàn)問(wèn)題，可以恢復(fù)舊版本，為解決問(wèn)題提供了很大的便利。
（2）使用開(kāi)源的自動(dòng)化軟件：比如在進(jìn)行系統(tǒng)安裝的時(shí)候，使用Cobbler或者Kickstart，進(jìn)行配置的時(shí)候使用Puppet，進(jìn)行監(jiān)控的時(shí)候使用Nagios、Cacti、Zabbix等，通過(guò)這些軟件能極大的幫助我們對(duì)系統(tǒng)進(jìn)行安裝、部署與監(jiān)控，節(jié)省我們的時(shí)間。我們不但要能實(shí)時(shí)的了解系統(tǒng)的運(yùn)行情況，還需要能預(yù)判系統(tǒng)將要出現(xiàn)的問(wèn)題，盡量的在出現(xiàn)問(wèn)題前解決問(wèn)題，這才是我們運(yùn)維真正需要做的，而不是忙著救火。
（3）有相應(yīng)的制度：想要實(shí)現(xiàn)自動(dòng)化制度，就一定要有自動(dòng)化運(yùn)維的實(shí)行標(biāo)準(zhǔn)，出現(xiàn)各個(gè)問(wèn)題，都有相應(yīng)的解決方法，這樣的做事效率將會(huì)有很大的提升。
建立高效IT運(yùn)維自動(dòng)化管理部署
記者與鄧?yán)诶蠋熣劦街薪慌d路目前的自動(dòng)運(yùn)維情況時(shí)，他談到："從今年2月份開(kāi)始，中交興路就開(kāi)始了自動(dòng)化運(yùn)維的部署，系統(tǒng)部署類(lèi)工具使用Cobbler；這個(gè)軟件是朋友推薦的，加上測(cè)試過(guò)一段時(shí)間，使用后覺(jué)得比Kickstart更方便，Cobbler支持命令行管理，web界面管理，還提供了API接口，可以方便二次開(kāi)發(fā)使用。配置類(lèi)工具選擇Puppet；可管理配置文件、用戶(hù)、Cron任務(wù)、軟件包、系統(tǒng)服務(wù)等。非常的方便。監(jiān)控類(lèi)工具是自己開(kāi)發(fā)的監(jiān)控系統(tǒng)Php+Mysql+Shell。"
公司監(jiān)控系統(tǒng)有3個(gè)階段：
1、 使用Nagios+Cacti
在這個(gè)階段主要是通過(guò)Nagios監(jiān)控服務(wù)運(yùn)行情況，使用Cacti監(jiān)控系統(tǒng)資源情況，雖然軟件監(jiān)控的時(shí)候沒(méi)問(wèn)題，但由于公司在全國(guó)20個(gè)省都有機(jī)房，使用Nagios+Cacti監(jiān)控起來(lái)十分麻煩，使用Nagios分布式監(jiān)控也十分麻煩；
2、使用Shell腳本監(jiān)控公司服務(wù)
在這個(gè)階段主要是通過(guò)Shell腳本定制的，根據(jù)公司的實(shí)際情況來(lái)進(jìn)行專(zhuān)門(mén)監(jiān)控，雖然通過(guò)這樣的方式監(jiān)控很方便，但在進(jìn)行日常維護(hù)的時(shí)候很麻煩，100+以上臺(tái)機(jī)器，每天光巡檢就是累死人的工作量。
3、使用我自己搭建的Php+Mysql+Shell監(jiān)控系統(tǒng)
通過(guò)我自己搭建的監(jiān)控系統(tǒng)監(jiān)控系統(tǒng)，解決了前2個(gè)問(wèn)題，不僅能通過(guò)Shell腳本根據(jù)公司的實(shí)際需求來(lái)監(jiān)控，而且能通過(guò)Php來(lái)在Web端查看監(jiān)控的內(nèi)容，并且能通過(guò)Gnuplot軟件生成相應(yīng)的數(shù)據(jù)圖。”
自動(dòng)化運(yùn)維部署細(xì)節(jié)分析
“自動(dòng)化運(yùn)維固然優(yōu)勢(shì)明顯，但是在部署的過(guò)程中也應(yīng)注意一些小細(xì)節(jié)，”鄧?yán)诶蠋熣劦饺c(diǎn)，
“一、選擇一個(gè)適合自己的軟件，要對(duì)相應(yīng)的軟件做相應(yīng)的了解，比如你想進(jìn)行系統(tǒng)部署類(lèi)的軟件，你是選擇Kickstart還是Cobbler，哪個(gè)的功能更適合你，哪個(gè)你更熟悉的配置與管理，同時(shí)一定要在虛擬環(huán)境測(cè)試成功后，在試運(yùn)行環(huán)境里測(cè)試，都沒(méi)有問(wèn)題在再生產(chǎn)里部署。
二、一定要有一個(gè)完整的思路，不要想做什么就做什么。比如你在進(jìn)行配置類(lèi)如Puppet的安裝與部署的時(shí)候，如果你沒(méi)有一個(gè)完整的思路，想一個(gè)做一個(gè)，比如域名采用什么方式都不考慮、主從端的時(shí)間都不同步、主從的IP不能互相平通，那么你肯定做一個(gè)失敗一個(gè)，不能成功實(shí)行運(yùn)維自動(dòng)化。
三、實(shí)現(xiàn)運(yùn)維自動(dòng)化要有相應(yīng)的流程與制度，如果你只是通過(guò)軟件來(lái)實(shí)現(xiàn)了自動(dòng)化，但在流程與制度上沒(méi)有相應(yīng)的措施，比如想通過(guò)Svn+Puppet對(duì)監(jiān)控系統(tǒng)進(jìn)行版本控制與自動(dòng)化的部署的時(shí)候，研發(fā)與運(yùn)維隨意的對(duì)Svn內(nèi)容進(jìn)行修改與刪除，那么運(yùn)維自動(dòng)化不如不實(shí)行，一但這樣的實(shí)行，你出現(xiàn)問(wèn)題的機(jī)率會(huì)非常的大，而且問(wèn)題的解決時(shí)間也會(huì)非常的多，得不償失。”
下面是某公司事故升級(jí)與處理流程圖，從用戶(hù)的問(wèn)題反饋到各部門(mén)之間的調(diào)查分析、協(xié)調(diào)工作都有詳細(xì)的規(guī)劃。
總結(jié)：
自動(dòng)化運(yùn)維會(huì)給IT人員帶來(lái)便利，同時(shí)會(huì)減少I(mǎi)T人員的投入，在今天這樣硬盤(pán)、CPU價(jià)格低廉的日子，公司的服務(wù)器數(shù)量會(huì)增加的非常的快，如果還是向以前那樣通過(guò)手工或者腳本來(lái)升級(jí)、部署、修改系統(tǒng)的話(huà)，你會(huì)發(fā)現(xiàn)你的工作時(shí)間嚴(yán)重不足，而且出現(xiàn)問(wèn)題的機(jī)率也很大，解決問(wèn)題的時(shí)間也會(huì)很長(zhǎng)，每天忙著救火，自己累不說(shuō)，領(lǐng)導(dǎo)也對(duì)這樣的運(yùn)維不滿(mǎn)意，職位與薪資自然無(wú)法得到增長(zhǎng)。如果你會(huì)自動(dòng)化運(yùn)維的話(huà)，你就會(huì)發(fā)現(xiàn)，其實(shí)管理100+的機(jī)器非常的簡(jiǎn)單，一個(gè)人就可以做到系統(tǒng)部署（使用Cobbler）、系統(tǒng)軟件部署與管理（使用Puppet）、系統(tǒng)服務(wù)與資源的監(jiān)控（使用Nagios+Cacti或者其他），通過(guò)這些開(kāi)源的自動(dòng)化運(yùn)維軟件，來(lái)減少我們的工作量，減少錯(cuò)誤產(chǎn)生頻率，增加我們的休息時(shí)間，來(lái)使我們能有更多的時(shí)間來(lái)學(xué)習(xí)與做其他自己想做的事。
專(zhuān)題推薦
51CTO電子雜志《Linux運(yùn)維趨勢(shì)》
