干貨云集 WOT2016峰會揭密大數(shù)據(jù)背后的技術(shù)難點
原創(chuàng)【51CTO.com原創(chuàng)稿件】當前,大數(shù)據(jù)浪潮席卷全球,整個IT技術(shù)領(lǐng)域發(fā)生了許多深刻而又復(fù)雜的變化。移動設(shè)備的爆炸式增漲,以及云計算、傳感器和物聯(lián)網(wǎng)等技術(shù)的快速發(fā)展,使近兩年產(chǎn)生的數(shù)據(jù)量,幾乎超過了以前歷史上的總和。每年,大數(shù)據(jù)領(lǐng)域都會涌現(xiàn)出大量新的技術(shù),成為大數(shù)據(jù)獲取、存儲、處理分析或者可視化的有效手段。
然而,搭建大數(shù)據(jù)平臺是一個完整、復(fù)雜的體系工程,新的思路和方法考驗著各大IT企業(yè)人才對大數(shù)據(jù)進行整合、評價及利用的綜合能力。未來,大數(shù)據(jù)將在哪些領(lǐng)域蓬勃發(fā)展并得到深入應(yīng)用?數(shù)據(jù)智能化的程度將進化到哪個階段?
11月25日,由51CTO.com主辦的WOT2016大數(shù)據(jù)技術(shù)峰會在北京粵財JW萬豪酒店召開,50多位來自阿里、騰訊、百度、京東、小米等知名企業(yè)的大數(shù)據(jù)領(lǐng)域資深技術(shù)專家齊聚大會現(xiàn)場,將在兩天的時間里與逾千名一線IT技術(shù)人員直面交流,分享經(jīng)驗。
本次WOT大會采取“9大技術(shù)分論壇+行業(yè)應(yīng)用實踐分論壇”的專場設(shè)置模式。議題涵蓋實時計算、機器學(xué)習(xí)、區(qū)塊鏈、算法與模型、數(shù)據(jù)挖掘與分析、系統(tǒng)架構(gòu)、NoSQL技術(shù)實踐、數(shù)據(jù)安全、數(shù)據(jù)可視化這九個大數(shù)據(jù)領(lǐng)域前沿話題,以及包含金融大數(shù)據(jù)、氣象大數(shù)據(jù)、零售大數(shù)據(jù)等傳統(tǒng)行業(yè)與大數(shù)據(jù)領(lǐng)域?qū)嵺`和熱門應(yīng)用,使參會者既能學(xué)習(xí)到落地的技術(shù)應(yīng)用,又能打開大數(shù)據(jù)技術(shù)***的商業(yè)模式創(chuàng)新、行業(yè)發(fā)展趨勢的視野。
在上午WOT2016大數(shù)據(jù)峰會的主會場環(huán)節(jié),來自阿里云數(shù)據(jù)架構(gòu)部總架構(gòu)師周衛(wèi)天、Hortonworks高級技術(shù)成員Ted Yu、【友盟+】CDO李丹楓和GrowingIO聯(lián)合創(chuàng)始人葉玎玎為大家?guī)砹藬?shù)據(jù)智能、數(shù)據(jù)分布調(diào)優(yōu)、用戶行為數(shù)據(jù)透視和精益數(shù)據(jù)分析等方面的精彩實戰(zhàn)分享,贏得了在場技術(shù)人的陣陣掌聲。
周衛(wèi)天:數(shù)據(jù)智能與阿里巴巴和我們
首先,周老師介紹了阿里巴巴集團大數(shù)據(jù)平臺的數(shù)據(jù)智能之路,具體包括大數(shù)據(jù)平臺架構(gòu)和數(shù)據(jù)智能能力是如何支撐阿里支付寶、螞蟻金服、菜鳥等寬泛的業(yè)務(wù)線;如何統(tǒng)一和保障數(shù)據(jù)的質(zhì)量和數(shù)據(jù)的安全;如何支撐阿里云云平臺的能力和安全。然后,分享了阿里大數(shù)據(jù)平臺如何幫助國計民生,如何幫助普惠金融,如何做到融入到我們的生活,讓數(shù)據(jù)服務(wù)為人類提供便利和讓生活更美好。
Ted Yu:TinyLFU, a highly efficient cache admission policy
數(shù)據(jù)的分布隨著時間的演變隨時發(fā)生變化,這就需要考慮兩個問題:一個是當Cache滿的時候,如何去除熱度低的數(shù)據(jù)。二是關(guān)注Cache的管理方案,如果新的數(shù)據(jù)有更大的貢獻,再把它放回Cache里面。這里基本上忽略了Admission。Efficient Policy和新的數(shù)據(jù)進行比較,看誰更適合保留在列表里面。Ted Yu這次主要基于訪問頻次跟大家分享如何基于TinyLFU調(diào)優(yōu)和提高它在各種應(yīng)用場景下的***率。
李丹楓:從用戶行為數(shù)據(jù)透視大數(shù)據(jù)商業(yè)密碼
如何在海量的數(shù)據(jù)中挖掘背后的價值,找到實際的應(yīng)用場景,并且以產(chǎn)品化的形態(tài)展現(xiàn)是當今DT時代面臨的一個重大課題。李老師本次演講主要分享了三方面內(nèi)容,即基于億級的數(shù)據(jù)分析,友盟+做過的數(shù)據(jù)挖掘工作和應(yīng)用的實踐?!居衙?】積累了大量的用戶互聯(lián)網(wǎng)、移動端的使用數(shù)據(jù)。在過去的一年里,他們圍繞這些用戶行為數(shù)據(jù),在廣告營銷,客戶生命周期管理,金融風(fēng)險控制和線下數(shù)據(jù)化運營等方面做了很多有益的嘗試,集中分享這些嘗試中用到的一些方法和取得的一些初期結(jié)果。
葉玎玎:精益數(shù)據(jù)分析驅(qū)動下一輪企業(yè)增長
流量為王的時代正在瓦解。2016年上半年,創(chuàng)業(yè)公司紛紛面臨流量成本居高不下、用戶對同質(zhì)產(chǎn)品免疫的雙重困境。留存比新增更重要、在運營上精細深耕比單純尋求產(chǎn)品上的差異更值得投入。你的團隊是否也感受到挑戰(zhàn),正為互聯(lián)網(wǎng)下半場的爭奪暗中發(fā)力?那么,如何用最少的成本獲取流量,并真正將用戶留存下來,如何把現(xiàn)有流量快速變現(xiàn)?數(shù)據(jù)驅(qū)動如何幫您找到增長的魔法數(shù)字?這些問題,葉老師給出了他的統(tǒng)計答案和經(jīng)驗之談。
今明兩天,更多技術(shù)大牛將在WOT2016大數(shù)據(jù)技術(shù)峰會現(xiàn)場為大家?guī)砑夹g(shù)干貨和一線實踐經(jīng)驗以及精彩的應(yīng)用案例,并給各位技術(shù)人員面對面解惑答疑。期待您的光臨和持續(xù)關(guān)注!
【51CTO原創(chuàng)稿件,合作站點轉(zhuǎn)載請注明原文作者和出處為51CTO.com】





















 
 
 














 
 
 
 