解決世界級大數(shù)據(jù)難題,阿里云自研MaxCompute再獲科技大獎
5月14日,浙江省科學技術(shù)獎勵大會正式召開,阿里云自研大數(shù)據(jù)計算平臺MaxCompute榮獲浙江省科技進步一等獎。
MaxCompute是國內(nèi)最早自研的大數(shù)據(jù)計算平臺之一。十年前,阿里云創(chuàng)始人王堅博士帶領(lǐng)團隊研發(fā)該平臺,主要應(yīng)用于大規(guī)模數(shù)據(jù)處理,目前已擁有EB級別的數(shù)據(jù)存儲能力、百PB級的單日計算能力。
隨著企業(yè)的數(shù)據(jù)規(guī)??焖僭鲩L,數(shù)據(jù)種類變得豐富多樣,大數(shù)據(jù)計算的需求越來越高,然而諸如Hadoop、MapReduce等開源技術(shù)的大數(shù)據(jù)計算平臺集群規(guī)模有限,在大規(guī)模數(shù)據(jù)處理效率、安全性等方面較低。
MaxCompute在執(zhí)行引擎、大數(shù)據(jù)語言、數(shù)據(jù)安全等方面采用了多項創(chuàng)新技術(shù),例如創(chuàng)新的存儲計算技術(shù),有效解決計算效率問題,它把不同的數(shù)據(jù)源用類似的方式存儲,用統(tǒng)一的方法計算,最終快速實現(xiàn)不同類型數(shù)據(jù)的計算。
十年來,該產(chǎn)品創(chuàng)造了多個世界記錄:2013年8月15日,***突破了單集群內(nèi)5000臺服務(wù)器的規(guī)模,目前單集群規(guī)模已超過1萬臺;2015、2016年,刷新世界計算奧運會SortBenchmark的六項世界紀錄;2017年,完成全球***基于公共云的100TB BigBench大數(shù)據(jù)基準測試。
阿里巴巴技術(shù)委員會主席王堅表示:“MaxCompute大幅降低了企業(yè)使用大數(shù)據(jù)的門檻,國內(nèi)近一半獨角獸公司的大數(shù)據(jù)計算平臺基于MaxCompute,為社會和消費者服務(wù)。”
目前,MaxCompute服務(wù)覆蓋全球16個國家和地區(qū),廣泛應(yīng)用于金融、互聯(lián)網(wǎng)、能源、交通、政務(wù)等行業(yè)。
例如,在“浙江最多跑一次”項目中,將與老百姓辦事最密切相關(guān)的100個事項70多億條數(shù)據(jù)實現(xiàn)共通共享共用。老百姓辦事不僅能最多跑一次,甚至有可能一次都不跑。
在百姓生活領(lǐng)域,支持墨跡天氣等應(yīng)用為4億用戶提供氣象預報服務(wù),每天的用戶查詢超過5億次;在工業(yè)制造領(lǐng)域,幫助制造企業(yè)尋找上千個參數(shù)中的***搭配,提升制造良品率。
在Forrester發(fā)布的《The Forrester WaveTM: CloudData Warehouse, Q4 2018》中,阿里云MaxCompute、DataWorks、ADB等三款產(chǎn)品入選,并在產(chǎn)品功能方面力壓微軟。
此外,阿里云城市大腦也同時榮獲浙江省科技進步一等獎。城市大腦首創(chuàng)于杭州,是國家首批人工智能開放創(chuàng)新平臺之一,也是城市治理與服務(wù)領(lǐng)域唯一的AI開放平臺。