亞馬遜Kinesis:何時使用亞馬遜全新大數(shù)據(jù)處理服務
作者:佚名
亞馬遜Kinesis提供了完整的幾近實時的數(shù)據(jù)處理解決方案(十秒以內)。Kinesis并沒有真正提供什么新概念,但是這個管理版本可以看做是具體用例的完整套件。
亞馬遜最近發(fā)布了Amazon Kinesis,這是一種針對大量數(shù)據(jù)快速處理的管理服務。你對于這項服務有什么看法,在哪些地方最有用?
Amazon Kinesis是實時處理數(shù)據(jù)流的一個管道。類似于Apache Storm,但是完全由亞馬遜Web服務托管和擴展。
Kinesis提供了完整的幾近實時的數(shù)據(jù)處理解決方案(十秒以內)。Kinesis并沒有真正提供什么新概念,但是這個管理版本可以看做是具體用例的完整套件。
一些案例包括:
·實時處理日志數(shù)據(jù)(發(fā)現(xiàn)可能的錯誤并在問題發(fā)生時向IT人員發(fā)送警報)
·接收應用用例的實時分析
·有人在Twitter、Facebook或者Google+提及具體的公司時,設置實時通稿警報
·使用具體的關鍵詞針對內容監(jiān)控實時新聞源,然后將這個內容交付給移動設備
Kinesis所做的這種類型的處理與其他亞馬遜服務所能做的處理一樣。你已經使用了亞馬遜的簡單隊列服務、簡單通知服務和自動擴展容量到處理實時數(shù)據(jù)流(實際上,我的公司也在這么做)。
亞馬遜Kinesis真正的優(yōu)勢在于能夠更輕松地從頭開始構建新的服務,為整個流程提供完整的管理服務。
最終,亞馬遜Kinesis對于處理大數(shù)據(jù)問題非常有用,比如:
·處理日志數(shù)據(jù)
·針對具體術語或者關鍵短語處理社交媒體流
·股票價格趨勢識別
·分析實時銷售統(tǒng)計
即使你沒有大量數(shù)據(jù)要處理,這種類型的架構能幫助處理容錯以及擴展。因此有很多因素可以來使用亞馬遜Kinesis,或者只要你擔心任何數(shù)據(jù)流的實時處理問題都可以。
責任編輯:鳶瑋
來源:
TechTarget中國編譯