賈揚(yáng)清團(tuán)隊(duì)攻克大數(shù)據(jù)計(jì)算性能瓶頸,阿里云連續(xù)兩年打破大數(shù)據(jù)最難紀(jì)錄
本文經(jīng)AI新媒體量子位(公眾號(hào)ID:QbitAI)授權(quán)轉(zhuǎn)載,轉(zhuǎn)載請(qǐng)聯(lián)系出處。
4月26日,大數(shù)據(jù)領(lǐng)域權(quán)威競(jìng)賽TPC-DS公布了最新結(jié)果,阿里云作為全球唯一入選的云計(jì)算公司獲得第一。值得一提的是,去年阿里云EMR首次打破該競(jìng)賽紀(jì)錄,成為全球首個(gè)通過(guò)TPC認(rèn)證的公共云產(chǎn)品。今年在這一基礎(chǔ)上,EMR的計(jì)算速度提升了2.2倍,連續(xù)兩年打破了這項(xiàng)大數(shù)據(jù)領(lǐng)域最難競(jìng)賽的世界紀(jì)錄。

阿里云EMR成績(jī)連續(xù)兩年位居TPC-DS第一
TPC-DS是大數(shù)據(jù)領(lǐng)域門檻最高的競(jìng)賽,也是評(píng)估大數(shù)據(jù)計(jì)算產(chǎn)品性能的權(quán)威標(biāo)準(zhǔn)之一。其需要參賽企業(yè)在十幾秒內(nèi)時(shí)間內(nèi)完成極高復(fù)雜度的SQL查詢以及超大規(guī)模數(shù)據(jù)量的計(jì)算處理,這對(duì)大數(shù)據(jù)計(jì)算產(chǎn)品的計(jì)算性能要求極高,過(guò)去十幾年,頂級(jí)科技企業(yè)都在嘗試沖擊榜單,但至今僅有兩家公司的大數(shù)據(jù)軟件通過(guò)認(rèn)證,其中之一就是阿里云。
過(guò)去一年,阿里云EMR在原有開源技術(shù)架構(gòu)之上,自研JindoFS等創(chuàng)新技術(shù),在國(guó)內(nèi)率先解決了計(jì)算、存儲(chǔ)分離架構(gòu)下的性能損耗問題,可滿足大規(guī)模計(jì)算場(chǎng)景的性能需求。
目前,EMR已服務(wù)新零售、互聯(lián)網(wǎng)、教育、人工智能及政務(wù)等行業(yè)企業(yè)和機(jī)構(gòu),以國(guó)際知名營(yíng)銷服務(wù)公司Yeahmobi為例,該公司通過(guò)使用阿里云EMR構(gòu)建大數(shù)據(jù)計(jì)算平臺(tái),實(shí)現(xiàn)了統(tǒng)一存儲(chǔ)、統(tǒng)一分析,整體成本下降超30%。
過(guò)去十年,阿里云大數(shù)據(jù)計(jì)算產(chǎn)品打破了多項(xiàng)世界紀(jì)錄,2015、2016年,自研MaxCompute刷新世界計(jì)算奧運(yùn)會(huì)SortBenchmark的六項(xiàng)世界紀(jì)錄;2017年,MaxCompute完成全球首次基于公共云的100TB BigBench大數(shù)據(jù)基準(zhǔn)測(cè)試;2019年MaxCompute以100TB的數(shù)據(jù)規(guī)模創(chuàng)造TPCx-BB競(jìng)賽世界紀(jì)錄。
阿里云計(jì)算平臺(tái)事業(yè)群總裁賈揚(yáng)清表示,“阿里云積極擁抱開源技術(shù)的同時(shí),也在不斷投入自研創(chuàng)新技術(shù),此次阿里云連續(xù)兩年刷新世界紀(jì)錄,是多年自研技術(shù)的必然成果,阿里云希望用這些創(chuàng)新技術(shù)服務(wù)更多的企業(yè)。”















 
 
 







 
 
 
 