恩墨學院孟碩:大數(shù)據(jù)分析下的數(shù)據(jù)學堂
原創(chuàng)【51CTO.com原創(chuàng)稿件】2016年11月25-26日,由51CTO.com主辦的WOT 2016大數(shù)據(jù)技術峰會在北京粵財JW萬豪酒店隆重召開。自2012年以來,WOT品牌大會秉承“專注技術、服務技術人員”的理念已經(jīng)成功舉辦十二屆,不僅積累了大量的專家資源,更獲得廣大IT從業(yè)者和技術愛好者的認可和好評,已成為業(yè)界重要的技術分享及人脈拓展平臺。
在WOT2016大數(shù)據(jù)技術峰會的實時計算主題專場,51CTO學院認證講師,恩墨學院大數(shù)據(jù)培訓產(chǎn)品總監(jiān)孟碩做了《實時計算》的演講,會后記者采訪了他,他為大家介紹了大數(shù)據(jù)相關的知識。
孟碩 51CTO學院認證講師,恩墨學院大數(shù)據(jù)培訓產(chǎn)品總監(jiān),前甲骨文Oracle BigData 一體機咨詢顧問。擅長利用MDB DTrace 剖析系統(tǒng)原理,解決系統(tǒng)數(shù)據(jù)庫與操作系統(tǒng)兼容性的諸多問題。在 Oracle 解決方案中心任職期間,接觸大量一線大數(shù)據(jù)應用案例,同時取得國際商業(yè)大數(shù)據(jù)領導公司 Cloudera 的 ACTP 認證講師資質(zhì)。 同時還獲得:Oracle OCM 10g、Cloudera Certified Administrator for Apache Hadoop (CCAH)
孟碩老師本次大會上的演講主題主要是流式計算,是大數(shù)據(jù)整個知識體系里面的一個位置,演講主要對比他們的優(yōu)缺點,對在生產(chǎn)過程中采用什么樣的架構給出了建議。
大數(shù)據(jù)時的數(shù)據(jù)分析
大數(shù)據(jù)分析涉及很多方面,如果要分析數(shù)據(jù)的話,包括從前端數(shù)據(jù)采集,到中間處理,到后面機器學習的部分。機器學習是最核心,也是最有意思的部分。如何快速有效去做?需要做到的是數(shù)據(jù)集成,可以針對數(shù)據(jù)從前端到***都有一個非常深刻了解。在此之前,在現(xiàn)代大數(shù)據(jù)平臺跟傳統(tǒng)數(shù)據(jù)分析中間是有一個鴻溝,很多現(xiàn)有的數(shù)據(jù)分析師,包括數(shù)據(jù)科學家不了解現(xiàn)在企業(yè)數(shù)據(jù)來源,應該學習整個架構而不是學習整個機器部分,現(xiàn)在很多企業(yè)整個的精力致力于這兩個鴻溝,把整個全產(chǎn)業(yè)鏈的知識體系都明確鋪開。
中國傳統(tǒng)企業(yè)數(shù)據(jù)的安全保障
其實中國的大數(shù)據(jù)主要的數(shù)據(jù)是綁在政府的手里,遲遲不敢放開,就是數(shù)據(jù)安全性的問題,現(xiàn)在目前有很多解決方案,比如說用kerbero,但是還沒有形成一個完整的體系,有時候技術上是成熟的,但是相對應的這種法律法規(guī)還沒有建立起來的時候,也是對大數(shù)據(jù)安全是個挑戰(zhàn)。
云計算與大數(shù)據(jù)
現(xiàn)在大數(shù)據(jù)的變化是于云計算本身有關系的,現(xiàn)在主流大數(shù)據(jù)的商業(yè)成品,都是支持在云環(huán)境下部署,比如說商業(yè)大數(shù)據(jù)龍頭企業(yè)clouder,它現(xiàn)在出了一個產(chǎn)品,簡化企業(yè)在亞馬遜平臺,還有其他云平臺甚至微軟的azur這種云平臺上面的部署,把部署過程做一個簡化。所以說未來云平臺對大數(shù)據(jù)的影響是,會有越來越的公司把自己數(shù)據(jù)平臺放在云上。
雙學院教大數(shù)據(jù)
恩墨學院和51CTO學院合作推出一個可能是唯一一個覆蓋整個大數(shù)據(jù)全軟件鏈知識體系的一套課程,恩墨學院提供了大量商用數(shù)據(jù)相當于在Linux里面的紅帽,恩墨學院同樣借鑒了了課程設計體系結合學院受眾的特點,量身訂作了整套的培訓課程。
【51CTO原創(chuàng)稿件,合作站點轉載請注明原文作者和出處為51CTO.com】