亞馬遜Kinesis:何時(shí)使用亞馬遜全新大數(shù)據(jù)處理服務(wù)
作者:佚名
亞馬遜Kinesis提供了完整的幾近實(shí)時(shí)的數(shù)據(jù)處理解決方案(十秒以內(nèi))。Kinesis并沒有真正提供什么新概念,但是這個(gè)管理版本可以看做是具體用例的完整套件。
亞馬遜最近發(fā)布了Amazon Kinesis,這是一種針對(duì)大量數(shù)據(jù)快速處理的管理服務(wù)。你對(duì)于這項(xiàng)服務(wù)有什么看法,在哪些地方最有用?
Amazon Kinesis是實(shí)時(shí)處理數(shù)據(jù)流的一個(gè)管道。類似于Apache Storm,但是完全由亞馬遜Web服務(wù)托管和擴(kuò)展。
Kinesis提供了完整的幾近實(shí)時(shí)的數(shù)據(jù)處理解決方案(十秒以內(nèi))。Kinesis并沒有真正提供什么新概念,但是這個(gè)管理版本可以看做是具體用例的完整套件。
一些案例包括:
·實(shí)時(shí)處理日志數(shù)據(jù)(發(fā)現(xiàn)可能的錯(cuò)誤并在問題發(fā)生時(shí)向IT人員發(fā)送警報(bào))
·接收應(yīng)用用例的實(shí)時(shí)分析
·有人在Twitter、Facebook或者Google+提及具體的公司時(shí),設(shè)置實(shí)時(shí)通稿警報(bào)
·使用具體的關(guān)鍵詞針對(duì)內(nèi)容監(jiān)控實(shí)時(shí)新聞源,然后將這個(gè)內(nèi)容交付給移動(dòng)設(shè)備
Kinesis所做的這種類型的處理與其他亞馬遜服務(wù)所能做的處理一樣。你已經(jīng)使用了亞馬遜的簡單隊(duì)列服務(wù)、簡單通知服務(wù)和自動(dòng)擴(kuò)展容量到處理實(shí)時(shí)數(shù)據(jù)流(實(shí)際上,我的公司也在這么做)。
亞馬遜Kinesis真正的優(yōu)勢(shì)在于能夠更輕松地從頭開始構(gòu)建新的服務(wù),為整個(gè)流程提供完整的管理服務(wù)。
最終,亞馬遜Kinesis對(duì)于處理大數(shù)據(jù)問題非常有用,比如:
·處理日志數(shù)據(jù)
·針對(duì)具體術(shù)語或者關(guān)鍵短語處理社交媒體流
·股票價(jià)格趨勢(shì)識(shí)別
·分析實(shí)時(shí)銷售統(tǒng)計(jì)
即使你沒有大量數(shù)據(jù)要處理,這種類型的架構(gòu)能幫助處理容錯(cuò)以及擴(kuò)展。因此有很多因素可以來使用亞馬遜Kinesis,或者只要你擔(dān)心任何數(shù)據(jù)流的實(shí)時(shí)處理問題都可以。
責(zé)任編輯:鳶瑋
來源:
TechTarget中國編譯