讓SQL用戶裝上hadoop大數(shù)據(jù)的引擎
2015年4月16日,第六屆中國數(shù)據(jù)庫技術(shù)大會(DTCC)在北京震撼登場。大會以"大數(shù)據(jù)技術(shù)交流和價(jià)值發(fā)現(xiàn)"為主題,吸引了2500多人參加,100多名數(shù)據(jù)庫技術(shù)專家來分享技術(shù),堪稱數(shù)據(jù)庫領(lǐng)域國內(nèi)***規(guī)模的專業(yè)會議。星環(huán)科技作為唯一受邀的大數(shù)據(jù)平臺商參展,CTO孫元浩發(fā)表了題為“大數(shù)據(jù)基礎(chǔ)技術(shù)發(fā)展的兩大方向和***研發(fā)成果”的主題演講。
孫元浩的演講分析了Hadoop技術(shù)經(jīng)過最近十年發(fā)展,已經(jīng)開始深入各行業(yè)和各類應(yīng)用,但從市場的反饋來看,Hadoop還沒有被大面積普遍采用,他表示主要制約因素來自兩個(gè)方面:1. SQL on Hadoop的技術(shù)進(jìn)展制約了企業(yè)原有應(yīng)用的遷移以及新應(yīng)用的開發(fā); 2. 企業(yè)在建設(shè)大數(shù)據(jù)平臺或者Data Lake時(shí),往往有多租戶資源管控和彈性計(jì)算的需求,這些需求現(xiàn)有的YARN或者虛擬化技術(shù)沒有滿足。隨后孫元浩介紹了星環(huán)科技在這兩方面的***突破,可幫助企業(yè)快速完成應(yīng)用遷移和部署。
同時(shí)在本次大會上,星環(huán)科技發(fā)布了全新的軟件版本TDH 4.1。孫元浩向參會者介紹道:“***版本產(chǎn)品提供80%的PL/SQL語法支持,并增加了大量的SQL優(yōu)化,可以滿足用戶對大數(shù)據(jù)處理的需求;另外新版本的TDH增加了分布式Cube功能,可以讓用戶在十億級別的數(shù)據(jù)量上實(shí)現(xiàn)交互式分析。下一步,星環(huán)還將發(fā)布為大數(shù)據(jù)應(yīng)用量身定做的TOS云操作系統(tǒng)。TOS基于Docker和Kubernetes,支持一鍵部署TDH,讓TDH和其他Docker應(yīng)用共享集群,其基于優(yōu)先級的搶占式資源調(diào)度和細(xì)粒度資源分配,讓大數(shù)據(jù)應(yīng)用輕松擁抱云服務(wù)。