【51CTO.com原創(chuàng)稿件】2016年11月25-26日，由51CTO.com主辦的WOT 2016大數(shù)據(jù)技術(shù)峰會(huì)在北京粵財(cái)JW萬(wàn)豪酒店隆重召開。自2012年以來(lái)，WOT品牌大會(huì)秉承“專注技術(shù)、服務(wù)技術(shù)人員”的理念已成功舉辦了十二屆，不僅積累了大量的專家資源，更獲得廣大IT從業(yè)者和技術(shù)愛好者的認(rèn)可和好評(píng)，已成為業(yè)界重要的技術(shù)分享及人脈拓展平臺(tái)。 

在本屆WOT2016大數(shù)據(jù)技術(shù)峰會(huì)的“行業(yè)應(yīng)用實(shí)踐”主題專場(chǎng)，來(lái)自葫蘆軟件公司高級(jí)研發(fā)經(jīng)理趙堃亮做了《葫蘆軟件的大數(shù)據(jù)營(yíng)銷實(shí)踐》的精彩主題演講。

[[177318]]

趙堃亮，畢業(yè)于清華大學(xué)計(jì)算機(jī)系，6年互聯(lián)網(wǎng)開發(fā)經(jīng)驗(yàn)，現(xiàn)帶領(lǐng)葫蘆軟件北京大數(shù)據(jù)團(tuán)隊(duì)負(fù)責(zé)Hulu大數(shù)據(jù)應(yīng)用開發(fā)。

一個(gè)成功的公司不僅有一個(gè)完美的產(chǎn)品，一套成熟的系統(tǒng)，還要有著完善的團(tuán)隊(duì)意識(shí)。葫蘆軟件就是如此。葫蘆北京團(tuán)隊(duì)作為技術(shù)領(lǐng)先的開發(fā)團(tuán)隊(duì)，不僅對(duì)業(yè)務(wù)和產(chǎn)品投入了很多的精力，對(duì)于營(yíng)銷、產(chǎn)品和廣告的支持也都不能少，還在團(tuán)隊(duì)建設(shè)、人才發(fā)展上投入了不小的精力。

Segmentation系統(tǒng)

葫蘆軟件的大數(shù)據(jù)開發(fā)使用了業(yè)內(nèi)主流的開源技術(shù)，底層架構(gòu)里同絕大多數(shù)公司一樣選擇使用了Hadoop集群，批處理更多使用選用Spark，流式計(jì)算選用Spark Streaming。同時(shí)葫蘆軟件針對(duì)Segmentation系統(tǒng)開發(fā)了自己的查詢引擎Nesto。葫蘆在大數(shù)據(jù)方面投入了很多精力，對(duì)開源社區(qū)有不少貢獻(xiàn)，為了更好的適應(yīng)葫蘆大數(shù)據(jù)應(yīng)用場(chǎng)景，葫蘆軟件針對(duì)Spark做了很多二次開發(fā)與優(yōu)化，提高了計(jì)算效率。Segmentation系統(tǒng)是葫蘆軟件北京大數(shù)據(jù)團(tuán)隊(duì)中的主要工作之一，用來(lái)支撐葫蘆市場(chǎng)營(yíng)銷及廣告投放對(duì)于大數(shù)據(jù)的需求，系統(tǒng)對(duì)基于大數(shù)據(jù)的精準(zhǔn)營(yíng)銷與數(shù)據(jù)分析都提供了很好的支持，是葫蘆軟件在大數(shù)據(jù)方向發(fā)展的主力產(chǎn)品之一。

Segmentation系統(tǒng)的難題

Segmentation系統(tǒng)是葫蘆軟件持續(xù)開發(fā)的系統(tǒng)，隨著數(shù)據(jù)量的不斷擴(kuò)大，需求多樣化的增加，葫蘆北京大數(shù)據(jù)團(tuán)隊(duì)針對(duì)Segmentation系統(tǒng)做了很多優(yōu)化與迭代開發(fā)，現(xiàn)在的Segmentation系統(tǒng)對(duì)市場(chǎng)和廣告團(tuán)隊(duì)的運(yùn)營(yíng)、報(bào)表及分析提供了全方位的支持。

能完成如此龐大的系統(tǒng)，趙堃亮老師坦言，葫蘆軟件北京大數(shù)據(jù)團(tuán)隊(duì)在開發(fā)中也遇到了不少難題。 在開發(fā)Segmentation系統(tǒng)中，為了能夠幫助市場(chǎng)營(yíng)銷或者廣告的營(yíng)銷人員方便的使用、查詢數(shù)據(jù)，設(shè)計(jì)實(shí)現(xiàn)了基于JSON的DSL查詢語(yǔ)言，基于這種JSON的泛型表達(dá)式，團(tuán)隊(duì)開發(fā)了基本的模板工具，允許用戶通過在頁(yè)面上的拖拽創(chuàng)建表達(dá)式進(jìn)行數(shù)據(jù)查詢。隨著數(shù)據(jù)量的增加，為了滿足運(yùn)營(yíng)快速查詢、分析的需求，葫蘆在處理問題中不斷總結(jié)經(jīng)驗(yàn)，投入精力開發(fā)了針對(duì)嵌套數(shù)據(jù)的查詢引擎Nesto，實(shí)現(xiàn)了在海量數(shù)據(jù)下的交互式查詢?，F(xiàn)在的葫蘆還完成了和第三方數(shù)據(jù)及廣告公司進(jìn)行數(shù)據(jù)的交換，完善了市場(chǎng)營(yíng)銷集成及廣告投放效果評(píng)測(cè)工作，運(yùn)營(yíng)人員可以在Segmentation系統(tǒng)中方便的創(chuàng)建維護(hù)營(yíng)銷方案。系統(tǒng)能做到這些都是在不斷迭代開發(fā)中總結(jié)經(jīng)驗(yàn)、解決問題的成果。

葫蘆團(tuán)隊(duì)

葫蘆成立于2008年，總部位于美國(guó)，公司創(chuàng)立之初同時(shí)成立了北京團(tuán)隊(duì)，葫蘆的核心文化之一便是“One Team”（同一個(gè)團(tuán)隊(duì)），葫蘆北京團(tuán)隊(duì)承擔(dān)了葫蘆業(yè)務(wù)線所有模塊開發(fā)，現(xiàn)在葫蘆已經(jīng)實(shí)踐出了很好的跨洋合作的形式，北京的團(tuán)隊(duì)和美國(guó)的團(tuán)隊(duì)共同來(lái)支撐需求，完成產(chǎn)品的開發(fā)。這和葫蘆內(nèi)部?jī)?yōu)秀的開發(fā)人員，以及葫蘆內(nèi)部開放、融合的環(huán)境有著直接的關(guān)系。對(duì)于葫蘆來(lái)說(shuō)，并不區(qū)分美國(guó)團(tuán)隊(duì)或是北京團(tuán)隊(duì)，始終強(qiáng)調(diào)的是一支團(tuán)隊(duì)，共同幫助葫蘆完成市場(chǎng)目標(biāo)，服務(wù)用戶，重新定義電視。

【51CTO原創(chuàng)稿件，合作站點(diǎn)轉(zhuǎn)載請(qǐng)注明原文作者和出處為51CTO.com】