趙修湘:關(guān)系型數(shù)據(jù)庫替代者-Hive數(shù)據(jù)倉庫
2014年7月25日-26日,由51CTO傳媒主辦的2014 WOT全球軟件技術(shù)峰會在北京富力萬麗酒店召開。秉承專注技術(shù)、服務技術(shù)人員的理念,自2012年以來,WOT品牌峰會成功舉辦了三屆,積累了大量的技術(shù)專家資源,獲得了廣大IT從業(yè)者和技術(shù)愛好者的一致認可,成為了業(yè)界重要的技術(shù)分享交流平臺以及人脈拓展平臺。
本次會議分為8個技術(shù)主題,分別是:數(shù)據(jù)庫技術(shù)與應用,互聯(lián)網(wǎng)架構(gòu)分析,高效的技術(shù)團隊,敏捷開發(fā),實時計算與數(shù)據(jù)分析,移動應用,自動化運維,開源技術(shù)。51CTO作為本次峰會的主辦方,將全程視頻、圖文直播報道這場數(shù)據(jù)的盛宴。
在WOT2014全球軟件技術(shù)峰會***一天的實時計算與數(shù)據(jù)分析專場,來自EasyHadoop的開源社區(qū)創(chuàng)始人之一趙修湘老師為我們帶來了主題為《Hive數(shù)據(jù)倉庫實戰(zhàn)》的主題演講。分享了大數(shù)據(jù)時代的挑戰(zhàn)以及Hive應用結(jié)構(gòu)化/非結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)倉庫優(yōu)勢。
Hadoop是一款運行在廉價商用服務器之上的,能夠?qū)Υ罅繑?shù)據(jù)進行有效存儲和處理的軟件框架,主要由HDFS分布式文件系統(tǒng)和Mapreduce計算框架組成,而Hive分布式數(shù)據(jù)倉庫構(gòu)建于hadoop的hdfs和mapred之上,用于管理和查詢結(jié)構(gòu)化/非結(jié)構(gòu)化數(shù)據(jù)的數(shù)據(jù)倉庫。
趙修湘老師表示雖然Hadoop的hdfs和mapred已經(jīng)能夠很好的解決大數(shù)據(jù)的存儲和分析問題,但是對于傳統(tǒng)的數(shù)據(jù)分析人員來說,依然面臨著理解mapred計算模型、自行開發(fā)代碼實現(xiàn)業(yè)務邏輯等挑戰(zhàn)。Hive的出現(xiàn),***的解決了傳統(tǒng)數(shù)據(jù)分析人員所面臨的問題。Hive使用類SQL查詢語法,***限度的實現(xiàn)了和SQL標準的兼容,是關(guān)系型數(shù)據(jù)庫***的替代者。
以上是51CTO.com記者從一線為您帶來的精彩報道。后續(xù)我們還有更加精彩的獨家報道,敬請關(guān)注。