芯片巨頭英特爾正在加倍努力以捍衛(wèi)其寶貴的數(shù)據(jù)中心領(lǐng)地——具體方式為開(kāi)發(fā)其自有技術(shù)以推動(dòng)數(shù)據(jù)管理與分析技術(shù)——例如Hadoop——的實(shí)現(xiàn)。

為了確保至強(qiáng)芯片能夠在數(shù)據(jù)中心管理員們的考量之下成為運(yùn)行大型Hadoop集群的***平臺(tái)，英特爾在本周二宣布將為Intel Distribution for Apache Hadoop(其自有、以開(kāi)源為主的軟件衍生方案)添加多項(xiàng)新的功能與技術(shù)。

這一輪更新當(dāng)中包含Intel Graph Builder for Apache Hadoop的第二個(gè)版本、Intel Analytics Toolkit for Apache Hadoop以及Intel Expressway Tokenization Boker。

在眾多英特爾專(zhuān)為Hadoop打造的主要項(xiàng)目當(dāng)中，“Rhino項(xiàng)目”尤其值得關(guān)注，它專(zhuān)門(mén)負(fù)責(zé)提供一套利用x86 AES處理器指令為Hadoop提供硬件加速型加密與解密功能的框架。該項(xiàng)目的出臺(tái)正是為了對(duì)近來(lái)沸沸揚(yáng)揚(yáng)的斯諾登事件作出回應(yīng)，希望借此克服據(jù)稱(chēng)已經(jīng)被美國(guó)國(guó)安局成功破解的某知名芯片組加密功能、從而挽回FreeBSD在x86 RdRand操作中的可靠性危機(jī)。OpenSSL還專(zhuān)門(mén)針對(duì)這一問(wèn)題作出了敦促。

不過(guò)為了打造這套Hadoop發(fā)行版本，英特爾已經(jīng)“在HBase當(dāng)中啟用了額外的加密功能，”英特爾大數(shù)據(jù)業(yè)務(wù)部門(mén)產(chǎn)品管理負(fù)責(zé)人Ritu Kama在接受采訪時(shí)指出。這些功能“能夠?qū)Base表與列進(jìn)行透明化加密，同時(shí)將HBase中的加密機(jī)制擴(kuò)展至單元級(jí)別。”

這套方案的處理速度比利用軟件在同一套硬件堆棧上運(yùn)行要快二十倍，Kama告訴我們。

其它新功能還包括Intel Analytics Toolkit，旨在幫助打理數(shù)據(jù)的工作人員訪問(wèn)一整套算法以及機(jī)器學(xué)習(xí)模式。

“我們正在開(kāi)發(fā)一整套構(gòu)件或者算法，希望能讓用戶(hù)直接利用這套工具包創(chuàng)建應(yīng)用程序——無(wú)論是否按照建議采取集群化形式，”Kama指出。

“大家并不需要每一次都從頭開(kāi)始。我們將提供一套流程，引導(dǎo)用戶(hù)將數(shù)據(jù)放置在輸入目錄之下。數(shù)據(jù)的格式可以多川多樣——網(wǎng)絡(luò)日志文件、結(jié)構(gòu)化或者非結(jié)構(gòu)化均可……之后我們將幫助用戶(hù)按照流程將數(shù)據(jù)整理成標(biāo)準(zhǔn)化格式，從而使算法能夠加以使用，”她解釋道。

展望未來(lái)，英特爾“可能還會(huì)提供一套編程環(huán)境或者IDE集成方案，開(kāi)發(fā)人員可以借此直觀地通過(guò)拖拽實(shí)現(xiàn)數(shù)據(jù)導(dǎo)入，”她表示。

除了這款工具包之外，英特爾還發(fā)布了“Graph Builder”，旨在幫助管理員們順利接納Hadoop所存儲(chǔ)的數(shù)據(jù)并將結(jié)果匯總為圖形形式——“零售商們可以根據(jù)由其歷史銷(xiāo)售數(shù)據(jù)與社交媒體數(shù)據(jù)整理出的信息創(chuàng)建圖形分析結(jié)果，從而更好地理解品牌號(hào)召力與客戶(hù)購(gòu)買(mǎi)習(xí)慣之間的真實(shí)關(guān)系，”英特爾方面在一份錄音聲明中解釋道。

英特爾之所以將大量精力投入到Hadoop相關(guān)項(xiàng)目中來(lái)，是因?yàn)檫@家芯片巨頭感覺(jué)到該平臺(tái)即將成為數(shù)據(jù)處理的核心軟件系統(tǒng)之一。另外，英特爾還希望確保自己推出的芯片產(chǎn)品能夠保持與AMD等競(jìng)爭(zhēng)對(duì)手的領(lǐng)先優(yōu)勢(shì)。出于這種考量，英特爾在自己的Hadoop項(xiàng)目中采用了大量開(kāi)源技術(shù)，除了一套整體化“Intel Hadoop Manager”層。

“我們并不打算真正建立起一套規(guī)模龐大的排他性知識(shí)產(chǎn)權(quán)體系，”英特爾公司數(shù)據(jù)中心軟件部門(mén)渠道、營(yíng)銷(xiāo)與業(yè)務(wù)運(yùn)營(yíng)總經(jīng)理Jason Fedder解釋稱(chēng)。“我們的努力重點(diǎn)在于創(chuàng)建起經(jīng)過(guò)調(diào)試優(yōu)化的構(gòu)件方案，從而加速我們的核心至強(qiáng)產(chǎn)品線在數(shù)據(jù)中心內(nèi)的實(shí)際表現(xiàn)。”

這套分析工具包將于2014年***季度正式推出，基價(jià)格也將由英特爾屆時(shí)公布。Graph Builder工具包則將于明年一月以開(kāi)源可下載方式公布。

至于英特爾的分銷(xiāo)商(其中包括管理方)，每個(gè)節(jié)點(diǎn)的價(jià)格大約在1500美元到3300美元之間，“具體數(shù)額取決于節(jié)點(diǎn)的總體數(shù)量以及實(shí)際支持方案(一周七天、每天二十四小時(shí);或者每周五天、每天九小時(shí))，”英特爾公司發(fā)言人在郵件中告訴我們。