自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

能否利用Hadoop搭建完整的云計算平臺?

云計算 Hadoop
Hadoop并不完全代表云計算,所以,要用Hadoop搭建完整的云計算平臺,答案是不夠。我們常說云計算,實際上還是通過計算機的大規(guī)?;蛘哒f海量處理來為生活中各式各樣的人和各行各業(yè)服務(wù)——所以,核心在“服務(wù)”。關(guān)于服務(wù),展開來就是常用的那3種(也是事實上的標(biāo)準(zhǔn)):SaaS,PaaS,IaaS。對云計算來說,公有和私有,虛擬和存儲,這其實是相對討論的核心。

Hadoop并不完全代表云計算,所以,要用Hadoop搭建完整的云計算平臺,答案是不夠。我們常說云計算,實際上還是通過計算機的大規(guī)?;蛘哒f海量處理來為生活中各式各樣的人和各行各業(yè)服務(wù)——所以,核心在“服務(wù)”。關(guān)于服務(wù),展開來就是常用的那3種(也是事實上的標(biāo)準(zhǔn)):SaaS,PaaS,IaaS。對云計算來說,公有和私有,虛擬和存儲,這其實是相對討論的核心。

回頭說Hadoop。在Google三大論文的直接刺激下,Hadoop社區(qū)興起,而在眾多的開源實現(xiàn)中,Hadoop(主項目)可以說是所有已知云計算方面開源項目的一個Top項目。

云計算中有哪些構(gòu)件?發(fā)展到目前的技術(shù)與規(guī)模,并沒有一個確切的定論,今天的說的話明天可能就不一樣了。但對Hadoop來說,實現(xiàn)了的部分,就是大部分企業(yè)在不斷發(fā)展中所遇到的大部分問題。直接上圖:

從整體生態(tài)系統(tǒng)的角度,從底層存儲,到中間的計算模型和框架,再到上層的邏輯處理和流、顯示,都有相應(yīng)開源的實現(xiàn)。這就是你說的構(gòu)件了。

包括我們看到的Hadoop2.0中,引入的新的處理框架,Spark,Storm,YARN(取代MR),都是Hadoop生態(tài)系統(tǒng)的完善與實現(xiàn)。

Hadoop實現(xiàn)的是在簡易硬件的基礎(chǔ)上進行盡量高可用性海量計算與處理的中上層模型。Hadoop處理了存儲(也只是一部分),虛擬化是沒有涉及的,而底層硬件Hadoop也是不涉及的,不管是Hadoop還是其他的項目,只是在軟件的層面想通過縱向或者橫向的拓展解決所有的問題是不現(xiàn)實的。Hadoop在硬件這方面,只是在實現(xiàn)中預(yù)留或者接入硬件特性,也就是在虛擬化這方面Hadoop只是個“APP”,不是“始作俑者”(用詞不當(dāng)了)。

那么,完整的云計算平臺呢?

按照企業(yè)級來說,是要看具體的企業(yè)方向和企業(yè)類型的,包括IBM和VMware都有提供不同的解決方案。大致上一定是由單點–>集群–>多層(準(zhǔn)分布式)–>硬件–>分布式(地域分布)來解決的。具體到Hadoop體系的技術(shù),直接去對應(yīng)上圖就好了。

從云計算這個概念出現(xiàn)到今天,資料可以說“浩如煙海”了,但很多資料只是互相復(fù)制黏貼,并沒有說到云計算的核心。我想提出的一個觀點是,完整的云計算平臺,依賴的是業(yè)務(wù),提供的是存儲與支持。

沒有業(yè)務(wù)需求而是照搬網(wǎng)上的資料或者自認為“活用”了某些技術(shù),都可能只是“娛人娛己”。我們看一下互聯(lián)網(wǎng)負載均衡技術(shù)是如何發(fā)展的就就更容易理解云計算:

客戶端緩存–>CDN緩存–>Apache&Nginx靜態(tài)頁面緩存–>PHP和Java動態(tài)內(nèi)存–>Memcache&Other Nosql–>Mysql&Oracle–>HDFS&Other Big Table

從技術(shù)的角度看,所有問題解決起來都是層次化的(大家肯定都有寫Demo吧),都是根據(jù)不同的需求引入不同的技術(shù),在單層單點乃至集群都無法解決問題的時候,新的計算框架,云計算與網(wǎng)格計算乃至動畫需要的大規(guī)模渲染都在需要的時候順理成章的引入??傊?,完整的云計算平臺,對于不同的公司業(yè)務(wù)都是不同的,拿騰訊來說,平臺的組件多如牛毛,“平臺”只是提供最基礎(chǔ)的服務(wù):存儲與支持,其他的都需要業(yè)務(wù)根據(jù)自身的特點在其上進行構(gòu)建(相信大公司都是有自己的完整方案的,這里我就不能再說了……),至于提高什么樣級別的這種“服務(wù)”,就要看公司的業(yè)務(wù)規(guī)模,需要支撐的體系,乃至公司的決策戰(zhàn)略了等等。
 

責(zé)任編輯:Ophira 來源: TechTarget中國
相關(guān)推薦

2015-03-18 09:57:58

云計算平臺云計算平臺搭建Hadoop

2012-06-07 09:28:41

2012-06-07 13:39:20

2023-11-16 11:17:09

云計算GenAI

2014-02-12 09:21:15

云計算超級云計算

2011-07-01 09:59:35

2018-06-15 20:44:40

Hadoop數(shù)據(jù)分析數(shù)據(jù)

2011-09-16 09:43:23

云計算

2020-11-11 00:40:35

云計算混合云私有云

2011-08-04 10:01:48

云計算金融

2012-09-29 08:53:20

云計算網(wǎng)絡(luò)云安全

2013-01-10 10:15:32

云BI云分析大數(shù)據(jù)

2012-07-30 09:52:01

云計算SI

2010-06-07 08:55:50

Hadoop云計算

2012-05-21 16:08:07

Hadoop云計算

2012-06-26 14:24:51

IBM云計算案例

2009-08-26 13:23:13

云計算框計算

2012-02-23 09:59:05

Hadoop分布式應(yīng)用

2012-01-13 09:14:27

微軟云計算Azure

2015-02-04 11:23:54

PKI公鑰基礎(chǔ)設(shè)施云計算
點贊
收藏

51CTO技術(shù)棧公眾號