大數(shù)據(jù)下的閃光點——南大通用
第十屆運營支撐暨大數(shù)據(jù)產業(yè)年會(CBC2013)已于6月19日順利落下帷幕,本屆大會是由中國計費網(wǎng)主辦的供運營支撐人交流和溝通的一個多元化平臺。大會以“變革力、創(chuàng)新力、發(fā)展力”為主題,以“重新定義中國信息化信息力/開放、創(chuàng)新、突破傳統(tǒng)思維、直擊大數(shù)據(jù)和云計算商業(yè)價值藍海”為目標,會議邀請了業(yè)內專家學者共同圍繞“大數(shù)據(jù)”這一行業(yè)熱點話題展開討論。
會上,南大通用趙總就“大數(shù)據(jù)平臺的定位”展開討論,介紹了大規(guī)模MPP集群的各種關鍵因素和應用案例。
以往的電信運營商主要關注結果數(shù)據(jù)庫,而過程數(shù)據(jù)庫更多側重過程產品,其實在數(shù)據(jù)庫時代,結果數(shù)據(jù)庫和過程數(shù)據(jù)庫都是戰(zhàn)略資產,用以應對市場競爭、輔助決策、實現(xiàn)精細化精準化營銷,滿足國家管制要求等。
作為為電信運營商提供的產品,南大通用推出的MPP將其穩(wěn)定性和可靠性放在頭一位。在MPP中每一個節(jié)點都要存儲整個數(shù)據(jù)打散之后的一份分片數(shù)據(jù)。在一個安全組內只要一臺服務器存活就可以對外提供服務。整個產品采用物理多副本實現(xiàn)高可用??傮w來說,南大通用的Mpp Cluster的五大優(yōu)勢:
1、高性能、壓壓縮比,對于復雜查詢、即席查詢性能是傳統(tǒng)數(shù)據(jù)庫的10倍以上,10至20倍壓縮比,節(jié)省存儲,可存儲長期歷史數(shù)據(jù)。
2、高可擴展、高并發(fā)、高可用。在線增加節(jié)點,性能線性提升,單節(jié)點300并發(fā)。數(shù)據(jù)多副本保存,更高等級的安全保障。
3、高性價比,PC Server+Linux+本機磁盤,超過小行機+Unix+陣列的性能
4、半結構化非結構化支持,全文檢索,將各種文章或信息中所有的文字序列都作為檢索對象,找出包含有欲檢索詞匯的文章或對象,支持幾乎所有的語種,并且可以保證100%的查詢召回率,1000億條數(shù)據(jù)秒級響應。
5、云存儲無縫整合,內置Hadoop并行訪問。
對于大數(shù)據(jù),電信運營商的行業(yè)數(shù)據(jù)遠遠比任何一個互聯(lián)網(wǎng)公司的數(shù)據(jù)規(guī)模和應用范圍都大,只是現(xiàn)在還沒有挖掘出來。尤其是對于行業(yè)數(shù)據(jù),任何一個互聯(lián)網(wǎng)公司是不具備的。這么大的數(shù)據(jù),用什么樣的數(shù)據(jù)庫?這是一個很現(xiàn)實的問題,當我們看到Mpp Cluster新型數(shù)據(jù)庫的優(yōu)勢我們有理由相信,只要我們攜手努力,中國的運營支撐依然會高奏凱歌勇往直前!