【51CTO.com原創(chuàng)稿件】近幾年，機(jī)器學(xué)習(xí)、深度學(xué)習(xí)以及大數(shù)據(jù)分析一直是熱門話題，人工智能在金融、營銷、軟件開發(fā)、戰(zhàn)略決策等領(lǐng)域的應(yīng)用也越來越普遍。

數(shù)據(jù)智能技術(shù)供應(yīng)商Teradata天睿公司于去年推出下一代分析平臺(tái)Teradata Vantage，提供描述性、預(yù)測性與指示性分析、自主性決策、機(jī)器學(xué)習(xí)、可視化工具等廣泛功能，致力于解決當(dāng)前分析方案中的各類問題。Teradata Vantage的高級分析是如何利用分析處理引擎實(shí)現(xiàn)機(jī)器學(xué)習(xí)和深度學(xué)習(xí)?上市半年來取得了哪些階段性成果?這些問題在近期召開的Teradata媒體會(huì)上得到了詳細(xì)解答。

高級分析的三個(gè)發(fā)展階段

Teradata天睿公司首席技術(shù)官寶立明(Stephen Brobst)認(rèn)為，高級分析的發(fā)展可以分為三個(gè)階段：第一階段是描述性分析，用于洞察過去;第二階段是預(yù)測性分析，能夠了解未來;第三階段是指導(dǎo)性分析，為可能發(fā)生的結(jié)果提供建議。Teradata開發(fā)的Vantage軟件平臺(tái)屬于第三階段的產(chǎn)物，能夠?yàn)槠髽I(yè)提供最佳的高級分析能力。

Teradata天睿公司首席技術(shù)官寶立明(Stephen Brobst)

如今，機(jī)器學(xué)習(xí)技術(shù)取得飛速發(fā)展，其能力超出人類的例子也比比皆是。最讓寶立明印象深刻的是，在某界國際象棋比賽中，來自挪威和美國的兩位象棋大師在最后一局打成了平局，經(jīng)過軟件分析后得知，挪威象棋大師本可以在60步內(nèi)將死對手，但是由于象棋大師只能預(yù)測幾十步以內(nèi)的可能性，對于60歩的結(jié)果完全無能為力，最后只能打成平手。

行業(yè)預(yù)測表明，一些需要簡單體力或腦力勞動(dòng)的職業(yè)將被機(jī)器取代，如收銀員、卡車司機(jī)、簡單翻譯、放射科醫(yī)生和個(gè)人信用評估等等。實(shí)際上，機(jī)器學(xué)習(xí)的預(yù)測能力已經(jīng)被應(yīng)用到企業(yè)的實(shí)際業(yè)務(wù)中，為企業(yè)的未來發(fā)展指引方向。

目前所謂的人工智能都是增強(qiáng)型人工智能，它還無法完全取代人類，只能增強(qiáng)人的能力。例如，軟件可以幫助醫(yī)生診斷一些疾病，但是機(jī)器的診斷分析只能提供參考，最后還是要靠醫(yī)生選擇治療方案，進(jìn)行治療。由這個(gè)例子引申開來，人們在制定策略、戰(zhàn)略時(shí)，可以讓智能化的軟件輔助我們實(shí)現(xiàn)這些戰(zhàn)略，AI不止能夠幫助企業(yè)提速降本增效，還能幫助企業(yè)管理者將戰(zhàn)略制定得更長遠(yuǎn)，更完美，Teradata Vantage正是為了這一目標(biāo)而存在。

Teradata Vantage高級分析平臺(tái)

Teradata Vantage高級分析平臺(tái)在架構(gòu)上可以分為四層，由下至上分別是數(shù)據(jù)源、分析引擎、分析語言和分析工具。此前，Teradata收購了一家來自斯坦福大學(xué)的創(chuàng)業(yè)公司Aster Data，創(chuàng)新性地同時(shí)集成了Map-Reduce和ANSI SQL引擎，能夠?qū)⑸蠈拥姆治鲆媾c底層的存儲(chǔ)設(shè)備打通，進(jìn)行大數(shù)據(jù)分析和計(jì)算。

Teradata Vantage的分析引擎層包含NewSQL引擎、機(jī)器學(xué)習(xí)引擎、圖形引擎、Spark引擎、TensorFlow引擎以及一系列定制引擎。寶立明強(qiáng)調(diào)，Teradata Vantage的機(jī)器學(xué)習(xí)引擎由廣泛的分析功能組成，除數(shù)據(jù)準(zhǔn)備、非結(jié)構(gòu)化數(shù)據(jù)分析功能以外，還涵蓋人工智能、統(tǒng)計(jì)、文本、情感判別等200余種分析引擎，便于科學(xué)家進(jìn)行描述性或預(yù)測性的分析。圖引擎可實(shí)現(xiàn)關(guān)聯(lián)分析，并了解網(wǎng)絡(luò)用戶、產(chǎn)品、過程乃至任何聯(lián)網(wǎng)實(shí)體中這些關(guān)系將怎樣影響結(jié)果。其中，每個(gè)引擎都用Docker做成Container封裝起來，不斷迭代。與此同時(shí)，基于開源的OpenStack平臺(tái)和商業(yè)分析引擎，讓開發(fā)者們可以開發(fā)出一些內(nèi)部引擎和工具集。

在分析語言方面，早期，Teradata推出了高性能和高可靠性的Teradata關(guān)系數(shù)據(jù)庫管理系統(tǒng)，該系統(tǒng)采用標(biāo)準(zhǔn)的SQL查詢語言，適用于處理復(fù)雜查詢的數(shù)據(jù)倉庫應(yīng)用。隨著預(yù)測性、指導(dǎo)性高級分析需求的逐漸增多，SQL這一結(jié)構(gòu)性的查詢語言已無法滿足需求， Teradata陸續(xù)將NoSQL，R，Python，NewSQL，SAS等語言納入進(jìn)來，結(jié)合頂層的分析工具以及廣泛的商業(yè)智能與可視化工具，讓企業(yè)的分析師和數(shù)據(jù)科學(xué)家無需非常了解機(jī)器學(xué)習(xí)算法即可用到機(jī)器學(xué)習(xí)的能力，為用戶提供預(yù)測性、指導(dǎo)性的高級分析能力。

Teradata Vantage本地化最佳實(shí)踐

為了滿足中國市場的本地化需求，Vantage平臺(tái)支持百萬級乃至上億級用戶體量的高級分析需求。據(jù)介紹，Teradata在中國的諸多銀行客戶紛紛開發(fā)出了相關(guān)的分析引擎，使數(shù)據(jù)科學(xué)家們能夠利用任何他們慣用的開源或商業(yè)的語言和工具，充分利用不同的數(shù)據(jù)源，通過各類分析引擎，與不同的應(yīng)用相結(jié)合，訪問、共享位于分布式存儲(chǔ)以及對象存儲(chǔ)中的各種格式的數(shù)據(jù)。

寶立明透露，通過機(jī)器學(xué)習(xí)的高級分析能力，Teradata幫助銀行客戶將信用卡欺詐診斷率提升50%，誤報(bào)率降低80%-90%。銀行客戶利用機(jī)器學(xué)習(xí)、神經(jīng)網(wǎng)絡(luò)的算法和引擎，能夠預(yù)測流失率、流失原因以及用戶去向，通過對信用卡交易時(shí)間、地點(diǎn)和頻率的分析，快速進(jìn)行可疑交易識別與欺詐行為判斷，從而規(guī)避交易風(fēng)險(xiǎn)，提升客戶體驗(yàn)。

除銀行客戶外，制造業(yè)、物流運(yùn)輸業(yè)以及電信等行業(yè)也將高級分析能力用于風(fēng)險(xiǎn)預(yù)測領(lǐng)域，例如預(yù)測哪些零部件將在何時(shí)發(fā)生故障，Teradata將這些高級分析能力打包推薦給客戶，助力企業(yè)快速提升業(yè)務(wù)效率。

Teradata Vantage的主要分析用例包括：

1、 功能預(yù)測。預(yù)測哪些客戶會(huì)流失，哪筆貸款會(huì)違約，以及客戶定位、金融預(yù)測、營銷組合建模、客戶抱怨預(yù)測、凈推薦值影響因素、風(fēng)險(xiǎn)建模、預(yù)測性維護(hù)等。

2、 客戶細(xì)分。與傳統(tǒng)的客戶細(xì)分不同，Vantage的客戶細(xì)分可以多達(dá)成百上千個(gè)屬性，用多維的方式進(jìn)行歸檔和分類，選擇最具潛力的客戶。詳細(xì)用例包括市場細(xì)分、客戶流失因素細(xì)分、放棄線上購買、破壞過程的關(guān)鍵影響因素等。

3、 了解因果關(guān)系。就是通過機(jī)器學(xué)習(xí)引擎了解因果關(guān)系來制定一個(gè)最佳的客戶路徑，避免客戶流失。包括營銷歸因、投資回報(bào)率、客戶流失、欺詐行為路徑、實(shí)時(shí)優(yōu)化等。

4、 情境。可以通過文本、語音、Email來收集資料，了解客戶對商品或服務(wù)是否滿意。據(jù)悉，Teradata在中國開發(fā)了基于中文的自然語言分析，實(shí)現(xiàn)情感分析，進(jìn)行客戶打分。

5、 網(wǎng)絡(luò)社交。利用網(wǎng)絡(luò)社交的相互關(guān)系，了解潛在用戶以及犯罪團(tuán)伙的情況，包括反饋/審查集群、了解喜歡我的用戶、欺詐網(wǎng)絡(luò)、線上欺詐等領(lǐng)域。

6、 假設(shè)測試。通過變量分析、關(guān)聯(lián)、主成分分析、采樣等功能，實(shí)現(xiàn)實(shí)驗(yàn)、影響力測量、根本原因分析以及過程優(yōu)化。

Teradata Vantage的三大典型案例

最后，寶立明列舉了客戶利用Teradata Vantage平臺(tái)實(shí)現(xiàn)高級分析的三大典型案例。

制造業(yè)：前瞻性維護(hù)

某全球大型制造商的生產(chǎn)設(shè)備位于世界各地，這些機(jī)器都處于7×24小時(shí)連續(xù)工作的狀態(tài)，為了進(jìn)行部件故障檢測、防止意外停機(jī)，該公司通過軟件對多個(gè)設(shè)備傳感器和性能數(shù)據(jù)進(jìn)行監(jiān)測，通過日志分析、廣義線性模型以及各類分析引擎，將停機(jī)事件傳感器路徑與穩(wěn)定運(yùn)行事件傳感器路徑進(jìn)行對比，隔離性能瓶頸的關(guān)鍵指標(biāo)，預(yù)測即將發(fā)生問題的設(shè)備，實(shí)現(xiàn)前瞻性維護(hù)，降低停機(jī)時(shí)間，節(jié)約成本。

零售業(yè)：多渠道整合

對于大型零售商而言，往往有眾多銷售渠道，但是零售商很難清楚地判斷哪種銷售渠道的影響力更大，更難了解客戶在不同渠道、對不同商品的各種互動(dòng)行為，更無法將線上及線下的渠道打通，進(jìn)行聯(lián)合銷售，提升客戶體驗(yàn)。為了解決這些困擾，某大型零售商運(yùn)用Teradata Vantage進(jìn)行多渠道整合，形成完整的客戶購買商品的路徑，并通過不斷測量新渠道活動(dòng)，確?？蛻粼谧疃痰臅r(shí)間內(nèi)以最低的成本購買商品，跟蹤客戶對商品的評論，不斷提高客戶的滿意度指數(shù)。

金融業(yè)：多渠道監(jiān)測

如何減少賬戶關(guān)閉事件，是全球銀行業(yè)共同關(guān)注的指標(biāo)。過去，客戶賬戶關(guān)閉與客戶滿意度模型需要不斷地手動(dòng)調(diào)整和干預(yù)，有了Vantage平臺(tái)的高級分析能力，能夠結(jié)合網(wǎng)銀、呼叫中心、ATM機(jī)等多渠道數(shù)據(jù)，自動(dòng)化的進(jìn)行分析，從賬戶關(guān)閉的時(shí)間點(diǎn)向前分析，找出與賬戶關(guān)閉相關(guān)的20余個(gè)行為，評估這些行為的風(fēng)險(xiǎn)，進(jìn)行干預(yù)，從而大幅降低賬戶關(guān)閉情況。

總結(jié)：

隨著機(jī)器學(xué)習(xí)、大數(shù)據(jù)的不斷發(fā)展，各類的分析引擎、分析語言、分析工具層出不窮，Teradata Vantage則整合了主流的商業(yè)和開源的分析工具，化繁為簡，落地各個(gè)行業(yè)，結(jié)合行業(yè)的屬性與需求，甄選最受行業(yè)歡迎的行業(yè)分析工具，不僅幫助企業(yè)管理數(shù)據(jù)，更能提供出色的分析能力，提升數(shù)據(jù)分析師與數(shù)據(jù)科學(xué)家們的用戶體驗(yàn)。

【51CTO原創(chuàng)稿件，合作站點(diǎn)轉(zhuǎn)載請注明原文作者和出處為51CTO.com】