但彬:大數(shù)據(jù)大挑戰(zhàn) 整合是關鍵
原創(chuàng)2013年4月26日-27日,由51CTO傳媒集團旗下WOT(World Of Tech)品牌主辦的2013大數(shù)據(jù)全球技術峰會在北京富力萬麗酒店召開。本次峰會將圍繞大數(shù)據(jù)基礎架構與上層應用的生態(tài)系統(tǒng),解決大規(guī)模數(shù)據(jù)引發(fā)的問題,探索大數(shù)據(jù)基礎的解決方案,激發(fā)數(shù)據(jù)挖掘帶來的競爭力,讓數(shù)據(jù)發(fā)出聲音。51CTO作為本次峰會的主辦方,將全程視頻、圖文直播報道這場數(shù)據(jù)的盛宴,更多內(nèi)容請點擊專題:2013大數(shù)據(jù)全球技術峰會。
Informatica公司大中國區(qū)***產(chǎn)品顧問但彬為大家?guī)砹舜髷?shù)據(jù)整合的專題演講,但彬介紹,現(xiàn)在大數(shù)據(jù)成為行業(yè)流行語,有非常多的地方可以利用。但是隨著數(shù)據(jù)量的大幅增長、數(shù)據(jù)來源和類型的復雜化,技術人員對數(shù)據(jù)進行分析越來越力不從心,如果將數(shù)據(jù)進行整合,那么數(shù)據(jù)分析的效率將大大提高。
技術突破帶來互聯(lián)網(wǎng)時代:24小時在線,全方位網(wǎng)絡覆蓋,隨之而來的數(shù)據(jù)爆炸使大數(shù)據(jù)成為流行語。其中大數(shù)據(jù)是大交易數(shù)據(jù)、大交互數(shù)據(jù)和大數(shù)據(jù)處理的統(tǒng)稱,現(xiàn)在的各種企業(yè)的數(shù)據(jù)越來越多,因此大數(shù)據(jù)對他們非常有用,講師也分享了大數(shù)據(jù)應用的一些案例。
那么大數(shù)據(jù)是關于什么的呢?但彬講師表示,大數(shù)據(jù)是關于創(chuàng)新和成本,創(chuàng)新越多、成本越小,數(shù)據(jù)回報率越高,因此大家都說大數(shù)據(jù)是座金山,合理的使用大數(shù)據(jù),可以驅動企業(yè)高速增長。
而大數(shù)據(jù)的分析處理依賴于軟件框架,Hadoop就是這樣的一個框架,這種分布式系統(tǒng)基礎架構,使用戶可以在不了解分布式底層細節(jié)的情況下開發(fā)分布式程序,進而充分利用集群的威力高速運算和存儲。它有一系列的優(yōu)點,比如可擴展性、成本低、效率高、可靠性高。有很多大數(shù)據(jù)系統(tǒng)都建立在Hadoop的基礎之上。
***,講師介紹了Informatica以及使用Informatica來數(shù)據(jù)集成的案例。Informatica于1993年成立,專注于數(shù)據(jù)集成,到現(xiàn)在已經(jīng)是全球領先的企業(yè)數(shù)據(jù)集成軟件提供商。
借助Informatica全面、統(tǒng)一、開放且經(jīng)濟的數(shù)據(jù)集成平臺,組織可以在改進數(shù)據(jù)質量的同時,訪問、發(fā)現(xiàn)、清洗、集成并交付數(shù)據(jù),以提高運營效率并降低運營成本。在大數(shù)據(jù)時代,通過大幅優(yōu)化和改善能力等方面,Informatica可以釋放Hadoop的強大潛能,實現(xiàn)有效利用Hadoop和降低成本。作為一個案例,但彬講師講了Informatica數(shù)據(jù)集成方案在互聯(lián)車輛項目的應用,這是一個典型的大數(shù)據(jù)項目,通過Informatica的集成方案,實現(xiàn)了提高用戶體驗和企業(yè)的業(yè)務能力。
以上是51CTO.com記者從一線為您帶來的精彩報道。后續(xù)我們還有更加精彩的獨家報道,敬請關注。