2016年對于SDN來說無疑是利好的一年，在金融、電信、互聯(lián)網(wǎng)等行業(yè)SDN產(chǎn)品和解決方案開始規(guī)?；渴?，許多傳統(tǒng)行業(yè)對于SDN的需求也初現(xiàn)端倪?！?016～2017年中國SDN市場發(fā)展狀況白皮書》顯示，2016年中國SDN軟件市場(主要指SDN控制器及相關(guān)的軟件解決方案與服務)規(guī)模達到了7.2億元，比2015年增長30.9%，預計到2021年，市場規(guī)模將達到46.7億元。同時，白皮書也指出了企業(yè)傳統(tǒng)網(wǎng)絡(luò)架構(gòu)面臨的四大難題。

• 難以滿足業(yè)務靈活部署的需求
• 難以滿足業(yè)務資源整合的需求
• 難以滿足場景化的需求
• 難以滿足新的運維需求

在討論運維難題的時候，分析師認為傳統(tǒng)運維方式無法對整個網(wǎng)絡(luò)的流量、設(shè)備以及業(yè)務實現(xiàn)集中管控、統(tǒng)一編排。造成這個問題的原因除了網(wǎng)絡(luò)架構(gòu)的變遷，不容忽視的一點是，現(xiàn)在網(wǎng)絡(luò)中的數(shù)據(jù)量實在是太大了。軟件技術(shù)的發(fā)展支撐了更多智能設(shè)備的接入。今天我們不斷地從各種源頭搜集和存儲網(wǎng)絡(luò)交易、社交媒體動態(tài)、移動設(shè)備以及各類不知道名字的自動化傳感器產(chǎn)生的數(shù)據(jù)。

在這種情況下，爆炸式增長的數(shù)據(jù)的存儲和計算需求促使存儲硬件、網(wǎng)絡(luò)基礎(chǔ)設(shè)施以及處理海量數(shù)據(jù)的計算方法不斷改進。傳統(tǒng)運維從只對網(wǎng)絡(luò)基礎(chǔ)設(shè)施和流量進行簡單管理到突然增加對業(yè)務和復雜流量進行管理必然力不從心。

Data is useless until you use it to make decisions

2017年初，思科斥資37億美元收購了AppDynamics，這是繼14億美元收購物Jasper的又一大動作。媒體視之為思科戰(zhàn)略轉(zhuǎn)型的標志，在筆者看來，思科是在布局其大數(shù)據(jù)生態(tài)。

大數(shù)據(jù)面臨的挑戰(zhàn)不僅僅是數(shù)據(jù)的大小，更是如何用新的方法從各類數(shù)據(jù)平臺處理數(shù)據(jù)。跟傳統(tǒng)的商業(yè)智能(BI)相比，大數(shù)據(jù)分析能為企業(yè)網(wǎng)絡(luò)管理帶來質(zhì)的改變，其價值也更大。

追根溯源的能力

現(xiàn)代企業(yè)網(wǎng)絡(luò)中每秒有百萬級的數(shù)據(jù)包在傳輸，當需要進行troubleshooting的時候，有太多的地方要去檢查，按照傳統(tǒng)的方法，即便是5分鐘的數(shù)據(jù)也需要幾個小時甚至幾天來分析處理。倘若多數(shù)情況下的問題不是網(wǎng)絡(luò)的問題，應用程序的代碼本身也應該和網(wǎng)包、網(wǎng)流一起被拿來分析。網(wǎng)絡(luò)管理需要弄清楚不同數(shù)據(jù)類型之間的區(qū)別。一些現(xiàn)有的解決方案在客戶可承受的價格范圍只能存儲三天的流量數(shù)據(jù)，對于時間更久遠的網(wǎng)絡(luò)故障，溯源只能水中撈月。

防微杜漸的能力

變化是現(xiàn)在IT系統(tǒng)的主題，已經(jīng)改變的信息并沒有什么意義，相反，預測有意義的變化十分具有挑戰(zhàn)。有時受限于網(wǎng)絡(luò)流量的大小和帶寬，一些大數(shù)據(jù)分析行為可能會引起正常業(yè)務的中斷。以電商網(wǎng)站的大促活動為例，預演的效果并不能涵蓋全部可能真實的場景。一個優(yōu)秀的架構(gòu)師通常能預見到現(xiàn)在的架構(gòu)有什么潛在問題。而如今，能發(fā)現(xiàn)這些潛在問題的手段，多依賴大數(shù)據(jù)分析。

洞悉未來的能力

大多數(shù)傳統(tǒng)的網(wǎng)絡(luò)系統(tǒng)缺乏靈活的設(shè)計，在面對現(xiàn)在復雜的網(wǎng)絡(luò)環(huán)境時無法應對。傳統(tǒng)網(wǎng)絡(luò)中簡陋的網(wǎng)絡(luò)監(jiān)控設(shè)備無力應對復雜的虛擬化網(wǎng)絡(luò)，更遑論從中提取出可執(zhí)行的規(guī)則;而基于探測和代理技術(shù)的監(jiān)控系統(tǒng)也無法完全覆蓋underlay和overlay的網(wǎng)絡(luò)。將所有的數(shù)據(jù)匯聚在一起利用大數(shù)據(jù)技術(shù)進行分析是企業(yè)網(wǎng)絡(luò)團隊必須首先解決的難題，因為其他的大數(shù)據(jù)分析應用已經(jīng)為業(yè)務部門創(chuàng)造了新的商機。

企業(yè)IT團隊已經(jīng)實現(xiàn)了更快速的故障排查，通過對大數(shù)據(jù)分析技術(shù)的利用，改進網(wǎng)絡(luò)基礎(chǔ)設(shè)施的安全性、穩(wěn)定性和可用性。未來的網(wǎng)絡(luò)該怎么設(shè)計?也許大數(shù)據(jù)分析能帶給人們一些啟示。

網(wǎng)絡(luò)運維的問題其實是大數(shù)據(jù)的問題

SDN的本質(zhì)是控制與轉(zhuǎn)發(fā)分離，從這個角度來看，控制的核心思想是網(wǎng)絡(luò)中有了“大腦”，通過這個智能系統(tǒng)對網(wǎng)絡(luò)設(shè)備下發(fā)指令，那么這些指令又來自哪里呢?通常我們認為，這些指令來自控制器基于已有的協(xié)議、規(guī)則對網(wǎng)絡(luò)流量和網(wǎng)絡(luò)行為的“審判”。而這個“審判”的過程，我們稱之為大數(shù)據(jù)分析。數(shù)據(jù)分析并非新生事物，在這里，我們加了個“大”字。

任何大數(shù)據(jù)分析的應用最重要的基礎(chǔ)環(huán)節(jié)便是采集和存儲。關(guān)于采集，業(yè)界已經(jīng)有過較多的討論，本文不再贅述。筆者想從以下幾個方面簡單概述一下大數(shù)據(jù)分析面臨的問題。

靈活擴展的存儲能力

在上一篇《直面數(shù)據(jù)中心網(wǎng)絡(luò)六大需求，六步打造面向未來的網(wǎng)絡(luò)》文章中筆者提過，思科網(wǎng)絡(luò)報告白皮書顯示2015～2020年全球網(wǎng)絡(luò)流量年復合增長率達到22%(注：2015年全球網(wǎng)絡(luò)流量為72EB，2016年這一數(shù)字為88EB，1EB=1,000PB)截至2020年全球網(wǎng)絡(luò)流量將會凈增長200EB。對如此規(guī)模的流量進行采集和分析的需求必然要求較強的存儲能力。

考慮到22%的增量，存儲系統(tǒng)必須在不喪失性能的前提下具有高度的靈活和可擴展性，以便不停機彈性擴容。文件系統(tǒng)還必須支持諸如同時處理不同類型和來源數(shù)據(jù)的能力、把海量大數(shù)據(jù)轉(zhuǎn)換成元數(shù)據(jù)的功能等等。在筆者看來，網(wǎng)絡(luò)的問題首先是大數(shù)據(jù)存儲的問題。在規(guī)劃和設(shè)計存儲系統(tǒng)的時候，應該考慮所有當下的情況以及未來的使用場景。

延時的問題

2015年前后的一段時間，IT圈很流行實時流數(shù)據(jù)處理技術(shù);后來筆者了解到大量的公有云服務商在自己的基礎(chǔ)設(shè)施中使用加速卡/智能卡。比如，微軟通過使用FPGA技術(shù)的智能網(wǎng)卡提高了Azure的性能，微軟的FPGA智能網(wǎng)卡還有加密和加速存儲協(xié)議的功能。大數(shù)據(jù)分析在一些場景如社交媒體、交易數(shù)據(jù)等需要實時處理以便作出決策，這要求不能出現(xiàn)響應延時或者數(shù)據(jù)丟失。對需要根據(jù)實時數(shù)據(jù)作出響應決策的應用來說，這個要求會更高。

跨平臺接入

隨著大數(shù)據(jù)應用在各種平臺和系統(tǒng)(尤其是物聯(lián)網(wǎng))上，對數(shù)據(jù)的交叉使用成為一種常規(guī)需求。公有云服務商在幫助大型客戶進行數(shù)據(jù)遷移的時候遇到過較多此類案例，存儲系統(tǒng)必須能夠同時處理來自不同系統(tǒng)、不同格式的異構(gòu)數(shù)據(jù)。數(shù)據(jù)時代的大數(shù)據(jù)生態(tài)必然要求軟、硬件盡可能的兼容、統(tǒng)一。IDC近年來一直致力于通過采用標準服務器來優(yōu)化網(wǎng)絡(luò)和擺脫廠商綁定;世界上最先進的數(shù)據(jù)中心如谷歌、微軟、領(lǐng)英、Facebook等都在向著這個方向發(fā)展。

安全的問題

安全是云計算的基石，之所以這么說源自數(shù)據(jù)對于我們的重要性。比如，最近大家熱議的某公有云廠商租戶隔離的問題;多數(shù)人認為VPC是目前成熟的、可行的租戶安全解決方案，這也是多數(shù)云廠商產(chǎn)品化的方向。事實上層出不窮的安全事件都是針對數(shù)據(jù)的竊取或破壞。由于數(shù)據(jù)交叉使用，現(xiàn)有的IT系統(tǒng)安全機制需要作出較大調(diào)整，而存儲也需要在不犧牲性能和可擴展性的前提下，滿足對這些數(shù)據(jù)處理的安全要求。

成本的問題

大數(shù)據(jù)意味著高成本，對數(shù)據(jù)分析來說，計算資源顯然沒有存儲資源的開銷大。有人認為采用開放標準硬件能節(jié)省大量的成本(約30%～80%不等)。曾經(jīng)轟轟烈烈的去IOE和政府倡導的國產(chǎn)化，在節(jié)約成本方面無疑有很多值得稱道的地方。隨著OpenStack的遍地開花，開源存儲技術(shù)也獲得了長足的發(fā)展。企業(yè)選擇不使用市面上現(xiàn)有的商用存儲方案，對數(shù)據(jù)去重、壓縮備份，用自己定制化的存儲硬件等措施，可以顯著降低成本。

總結(jié)一下，大數(shù)據(jù)的價值已經(jīng)得到普遍的認可，看一下自動化之于網(wǎng)絡(luò)運維的效果我們相信，未來是令人振奮的，但更深層次的價值有待業(yè)界進一步發(fā)掘;通過研究不難發(fā)現(xiàn)，網(wǎng)絡(luò)運維的問題其實是大數(shù)據(jù)的問題，而大數(shù)據(jù)分析本身尚處在初級階段，有較多亟需解決的難題。那么，在這條路上我們該怎么走?