賈揚清團隊攻克大數(shù)據(jù)計算性能瓶頸,阿里云連續(xù)兩年打破大數(shù)據(jù)最難紀錄
本文經(jīng)AI新媒體量子位(公眾號ID:QbitAI)授權轉載,轉載請聯(lián)系出處。
4月26日,大數(shù)據(jù)領域權威競賽TPC-DS公布了最新結果,阿里云作為全球唯一入選的云計算公司獲得第一。值得一提的是,去年阿里云EMR首次打破該競賽紀錄,成為全球首個通過TPC認證的公共云產(chǎn)品。今年在這一基礎上,EMR的計算速度提升了2.2倍,連續(xù)兩年打破了這項大數(shù)據(jù)領域最難競賽的世界紀錄。
阿里云EMR成績連續(xù)兩年位居TPC-DS第一
TPC-DS是大數(shù)據(jù)領域門檻最高的競賽,也是評估大數(shù)據(jù)計算產(chǎn)品性能的權威標準之一。其需要參賽企業(yè)在十幾秒內時間內完成極高復雜度的SQL查詢以及超大規(guī)模數(shù)據(jù)量的計算處理,這對大數(shù)據(jù)計算產(chǎn)品的計算性能要求極高,過去十幾年,頂級科技企業(yè)都在嘗試沖擊榜單,但至今僅有兩家公司的大數(shù)據(jù)軟件通過認證,其中之一就是阿里云。
過去一年,阿里云EMR在原有開源技術架構之上,自研JindoFS等創(chuàng)新技術,在國內率先解決了計算、存儲分離架構下的性能損耗問題,可滿足大規(guī)模計算場景的性能需求。
目前,EMR已服務新零售、互聯(lián)網(wǎng)、教育、人工智能及政務等行業(yè)企業(yè)和機構,以國際知名營銷服務公司Yeahmobi為例,該公司通過使用阿里云EMR構建大數(shù)據(jù)計算平臺,實現(xiàn)了統(tǒng)一存儲、統(tǒng)一分析,整體成本下降超30%。
過去十年,阿里云大數(shù)據(jù)計算產(chǎn)品打破了多項世界紀錄,2015、2016年,自研MaxCompute刷新世界計算奧運會SortBenchmark的六項世界紀錄;2017年,MaxCompute完成全球首次基于公共云的100TB BigBench大數(shù)據(jù)基準測試;2019年MaxCompute以100TB的數(shù)據(jù)規(guī)模創(chuàng)造TPCx-BB競賽世界紀錄。
阿里云計算平臺事業(yè)群總裁賈揚清表示,“阿里云積極擁抱開源技術的同時,也在不斷投入自研創(chuàng)新技術,此次阿里云連續(xù)兩年刷新世界紀錄,是多年自研技術的必然成果,阿里云希望用這些創(chuàng)新技術服務更多的企業(yè)。”