自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

基于流的數(shù)據(jù)處理可以使Hadoop運(yùn)行更快嗎?

云計(jì)算 Hadoop
Apache Hadoop分布式文件處理系統(tǒng)是有好處的,而且它正在獲得注意力。然而,它也有壞處。有些組織發(fā)現(xiàn)從Hadoop開始的話需要重新思考軟件架構(gòu),而且它所需要的數(shù)據(jù)技能也是必要的。

Apache Hadoop分布式文件處理系統(tǒng)是有好處的,而且它正在獲得注意力。然而,它也有壞處。有些組織發(fā)現(xiàn)從Hadoop開始的話需要重新思考軟件架構(gòu),而且它所需要的數(shù)據(jù)技能也是必要的。

對(duì)于一些人來說,Hadoop的批處理模型的一個(gè)問題是,它估計(jì)在突增數(shù)據(jù)采集之間的進(jìn)行批處理時(shí)會(huì)有宕機(jī)的時(shí)間。這是許多企業(yè)都的情況,當(dāng)他們?cè)诒镜夭僮?,或者在白天有大量事?wù),但很少在晚上(如果有的話)。如果夜間窗口足夠大可以處理前一天積累的數(shù)據(jù),那么一切都會(huì)順利。雖然對(duì)于一些企業(yè),窗口的停機(jī)時(shí)間是小或不存在的,甚至使用Hadoop的高性能的處理,他們?nèi)匀辉谝惶靸?nèi)得到的數(shù)據(jù)比他們可以在24內(nèi)小時(shí)處理的要多。

對(duì)于可接受小窗口的組織,添加基于數(shù)據(jù)處理組件的方法可能有幫助,GigaSpaces的***技術(shù)官Nati Shalom在最近的一篇關(guān)于使用Hadoop更快的博客中寫到。通過不斷地處理傳入的數(shù)據(jù)轉(zhuǎn)化成有用的包和刪除那些不需要企業(yè)處理(或再加工)的靜態(tài)數(shù)據(jù),可以顯著加速他們的大數(shù)據(jù)的批處理過程。

責(zé)任編輯:王程程 來源: 中云網(wǎng)
相關(guān)推薦

2015-03-30 10:48:17

大數(shù)據(jù)大數(shù)據(jù)處理Hadoop

2012-09-06 09:36:17

谷歌NatiShalom數(shù)據(jù)處理

2013-12-30 15:53:35

數(shù)據(jù)處理華為閃存

2011-12-08 09:56:14

Hadoop

2012-05-31 14:37:10

Hadoop大數(shù)據(jù)

2018-01-31 21:26:48

HadoopSparkStream大數(shù)據(jù)

2021-07-17 22:57:07

開發(fā)框架工具

2015-05-05 11:18:18

大數(shù)據(jù)Hadoop技術(shù)處理

2011-09-01 15:12:43

SQL ServerHadoop

2011-08-19 15:42:12

Hadoop瓶頸數(shù)據(jù)處理

2017-05-05 09:53:34

Hadoop大數(shù)據(jù)處理

2023-09-27 15:34:48

數(shù)據(jù)編程

2018-01-22 08:33:28

SparkHadoop計(jì)算

2017-05-11 11:00:11

大數(shù)據(jù)Hadoop數(shù)據(jù)處理

2022-01-26 09:00:00

數(shù)據(jù)庫SnowparkSQL

2017-05-11 17:36:50

2013-12-27 16:15:11

Hadoop大數(shù)據(jù)處理

2013-12-30 10:40:12

大數(shù)據(jù)處理大數(shù)據(jù)Hadoop

2012-09-11 09:16:52

Hadoop

2023-07-12 12:02:06

WOT大數(shù)據(jù)流式數(shù)據(jù)湖
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)