讓SQL用戶(hù)裝上hadoop大數(shù)據(jù)的引擎
2015年4月16日,第六屆中國(guó)數(shù)據(jù)庫(kù)技術(shù)大會(huì)(DTCC)在北京震撼登場(chǎng)。大會(huì)以"大數(shù)據(jù)技術(shù)交流和價(jià)值發(fā)現(xiàn)"為主題,吸引了2500多人參加,100多名數(shù)據(jù)庫(kù)技術(shù)專(zhuān)家來(lái)分享技術(shù),堪稱(chēng)數(shù)據(jù)庫(kù)領(lǐng)域國(guó)內(nèi)***規(guī)模的專(zhuān)業(yè)會(huì)議。星環(huán)科技作為唯一受邀的大數(shù)據(jù)平臺(tái)商參展,CTO孫元浩發(fā)表了題為“大數(shù)據(jù)基礎(chǔ)技術(shù)發(fā)展的兩大方向和***研發(fā)成果”的主題演講。
孫元浩的演講分析了Hadoop技術(shù)經(jīng)過(guò)最近十年發(fā)展,已經(jīng)開(kāi)始深入各行業(yè)和各類(lèi)應(yīng)用,但從市場(chǎng)的反饋來(lái)看,Hadoop還沒(méi)有被大面積普遍采用,他表示主要制約因素來(lái)自?xún)蓚€(gè)方面:1. SQL on Hadoop的技術(shù)進(jìn)展制約了企業(yè)原有應(yīng)用的遷移以及新應(yīng)用的開(kāi)發(fā); 2. 企業(yè)在建設(shè)大數(shù)據(jù)平臺(tái)或者Data Lake時(shí),往往有多租戶(hù)資源管控和彈性計(jì)算的需求,這些需求現(xiàn)有的YARN或者虛擬化技術(shù)沒(méi)有滿(mǎn)足。隨后孫元浩介紹了星環(huán)科技在這兩方面的***突破,可幫助企業(yè)快速完成應(yīng)用遷移和部署。
同時(shí)在本次大會(huì)上,星環(huán)科技發(fā)布了全新的軟件版本TDH 4.1。孫元浩向參會(huì)者介紹道:“***版本產(chǎn)品提供80%的PL/SQL語(yǔ)法支持,并增加了大量的SQL優(yōu)化,可以滿(mǎn)足用戶(hù)對(duì)大數(shù)據(jù)處理的需求;另外新版本的TDH增加了分布式Cube功能,可以讓用戶(hù)在十億級(jí)別的數(shù)據(jù)量上實(shí)現(xiàn)交互式分析。下一步,星環(huán)還將發(fā)布為大數(shù)據(jù)應(yīng)用量身定做的TOS云操作系統(tǒng)。TOS基于Docker和Kubernetes,支持一鍵部署TDH,讓TDH和其他Docker應(yīng)用共享集群,其基于優(yōu)先級(jí)的搶占式資源調(diào)度和細(xì)粒度資源分配,讓大數(shù)據(jù)應(yīng)用輕松擁抱云服務(wù)。