自拍偷在线精品自拍偷,亚洲欧美中文日韩v在线观看不卡

淺談如何建立互聯(lián)網(wǎng)風(fēng)控系統(tǒng)

安全 應(yīng)用安全
本文將會(huì)是豈安科技技術(shù)團(tuán)隊(duì)的拋磚石,來(lái)引出小伙伴的總結(jié)分享,更重要的是能得到外界的批評(píng)指正,幫我們出謀劃策。這一篇將沒(méi)什么干貨,只是從我的角度對(duì)一些風(fēng)險(xiǎn)相關(guān)的概念進(jìn)行通俗化的闡述,希望能講明我們想要針對(duì)的問(wèn)題是什么,我們的定位在哪里,技術(shù)的角度看需要去做什么,為什么要這么做,我們跟巨頭的差別在哪里。

彈指間,一起創(chuàng)業(yè)已有大半年。這大半年間,累與成果并存,痛并快樂(lè)著,這自不用多提,應(yīng)該是這一行從業(yè)者的普遍感受了?,F(xiàn)在每每反思以往,總結(jié)不足,其中一條就是技術(shù)團(tuán)隊(duì)過(guò)于封閉,悶著頭干活,發(fā)聲不足,既不利于引入別人的好的經(jīng)驗(yàn),也沒(méi)法將自身的成果拿出去接受批判,這其實(shí)與我們的技術(shù)宗旨是不符合的,還是需要擠出時(shí)間往外看,向外喊。

本文將會(huì)是豈安科技技術(shù)團(tuán)隊(duì)的拋磚石,來(lái)引出小伙伴的總結(jié)分享,更重要的是能得到外界的批評(píng)指正,幫我們出謀劃策。這一篇將沒(méi)什么干貨,只是從我的角度對(duì)一些風(fēng)險(xiǎn)相關(guān)的概念進(jìn)行通俗化的闡述,希望能講明我們想要針對(duì)的問(wèn)題是什么,我們的定位在哪里,技術(shù)的角度看需要去做什么,為什么要這么做,我們跟巨頭的差別在哪里。

什么是風(fēng)險(xiǎn)

筆者學(xué)術(shù)時(shí)代的老板是作可信計(jì)算的,當(dāng)年的課題便是信任與風(fēng)險(xiǎn),所以恰巧也算是國(guó)內(nèi)較早在計(jì)算機(jī)領(lǐng)域?qū)︼L(fēng)險(xiǎn)一塊有所涉獵的人之一,當(dāng)時(shí)最頭痛的是,雖然很多人在這些方向都有相關(guān)的學(xué)術(shù)工作,但是對(duì)“信任”和”風(fēng)險(xiǎn)“這兩個(gè)模糊的概念,從來(lái)就沒(méi)有清晰公認(rèn)的定義,大家都是自說(shuō)自話,概念上都是遷就自己的工作,對(duì)信任和風(fēng)險(xiǎn)都有著自己的見(jiàn)解,以至于光綜述里總結(jié)的定義就有上百種。

現(xiàn)在,工業(yè)界也出現(xiàn)了類似的情況,電商已經(jīng)燒了好些年頭,互聯(lián)網(wǎng)金融最近也大火,征信風(fēng)控的字眼更是隨處可見(jiàn),幾番交道打下來(lái),大家基本上還是在風(fēng)險(xiǎn)之上談風(fēng)險(xiǎn),很少對(duì)其本身去作過(guò)多的定義和闡述,具體手段也限于傳統(tǒng)金融業(yè)經(jīng)驗(yàn)往線上的照搬,或者是具體漏洞的補(bǔ)缺,有些像手里拿著把箭在掃射。我依然執(zhí)拗以為,一定要先說(shuō)清楚自己面對(duì)的問(wèn)題是什么,才能更加的明白自己在做什么,做起事來(lái)才能有的放矢,不至于陷入被動(dòng)的攻防戰(zhàn)。

廢話一籮筐,直接給出我個(gè)人比較認(rèn)可的通俗定義,來(lái)方便闡述本文后續(xù)的概念:

風(fēng)險(xiǎn) = probability + outcome

這是我看到的一種比較全面的解釋。很多人認(rèn)為風(fēng)險(xiǎn)是帶來(lái)?yè)p失的概率,也有很多人覺(jué)得風(fēng)險(xiǎn)就是最終帶來(lái)的損失;就好像很多人認(rèn)為坐汽車風(fēng)險(xiǎn)高(因?yàn)檐嚨湈茁矢?,另一部分人覺(jué)得飛機(jī)更危險(xiǎn)(基本就是掛了),大家的側(cè)重點(diǎn)不同。

而作為風(fēng)險(xiǎn)相關(guān)的從業(yè)者,個(gè)人認(rèn)為兩者都需要考慮,所以和很多人一樣,直接做了加法,既包含可能性,也包含潛在的損失。

什么是風(fēng)控

風(fēng)險(xiǎn)本身只是人對(duì)客觀事實(shí)的一個(gè)評(píng)估,重要的是如何去計(jì)算它,之后又如何去用來(lái)幫我們實(shí)現(xiàn)利益的最大化,這里給一張簡(jiǎn)單抽象的圖來(lái)描述所謂的風(fēng)控邏輯上是一個(gè)什么樣的流程:

這里面對(duì)信任的定義是當(dāng)年從哲學(xué)論文里面摘出來(lái)的,算是相對(duì)靠譜的定義:

 

Trust = knowledge (weak) reduction 

 

簡(jiǎn)要的介紹:

所謂的信任,就是利用一切可以用的知識(shí)(通俗常稱為證據(jù),或者情報(bào)等),進(jìn)行一定的歸納。

這些知識(shí)包括:

  • 一些常規(guī)的檢查工作,主要是做一些身份識(shí)別,合規(guī)的工作。這種是最常見(jiàn)的
  • 社交信息,主要是一些關(guān)聯(lián)信息,可以通過(guò)交易、ip、手機(jī)號(hào)能找到一批其他個(gè)體的信息,可以有效的幫助判斷
  • 歷史行為,被評(píng)估者的歷史行為有著極為重要的作用
  • 上下文,當(dāng)前交易/活動(dòng)的具體特征,對(duì)當(dāng)下的判斷非常重要

其他信息

事實(shí)上,要做信任判斷還需要很多其他額外的知識(shí)。只是越多越準(zhǔn)確,那么所謂的uncertainty就越小,后續(xù)的決策才會(huì)越準(zhǔn)確。

現(xiàn)在一般傳統(tǒng)的就是作一些合規(guī)操作,時(shí)髦一點(diǎn)的就是在歷史行為和社交信息這一塊大做文章,來(lái)彌補(bǔ)傳統(tǒng)方式信息量的不足,還可以標(biāo)榜“大數(shù)據(jù)”,我們豈安科技也屬于后者。

所謂的風(fēng)險(xiǎn)決策,就是利用收集的信任信息,對(duì)所有可能的結(jié)果做一個(gè)損失(損失是基本客觀存在的)和概率(主要靠信任信息來(lái)推斷)的判斷,最終形成一個(gè)風(fēng)險(xiǎn)輪廓,來(lái)方便決策后續(xù)的就好辦了。

有了具體的風(fēng)險(xiǎn)輪廓,根據(jù)企業(yè)的風(fēng)險(xiǎn)承受能力和商業(yè)模式作指引,就可以做出相應(yīng)的決策了。一般而言,如果需要降低風(fēng)險(xiǎn),需要采取措施去降低風(fēng)險(xiǎn),或者是損失。

以現(xiàn)在流行的p2p舉例,要么是讓借貸人提供更多的材料去證明他違約的概率比較小;要么是平臺(tái)會(huì)收取一定比例的擔(dān)保費(fèi)用,來(lái)減少違約帶來(lái)的損失。

現(xiàn)在的風(fēng)控系統(tǒng)是啥樣的

對(duì)風(fēng)控的描述比較空泛,只是給出邏輯概念。目前大多數(shù)的企業(yè)和機(jī)構(gòu)應(yīng)該都是這么干的,只是有的干得比較好,有的干的更好而已:

  • 成熟度。大型、新型的企業(yè)會(huì)有一整套風(fēng)控框架,里面相關(guān)的人數(shù)量和角色也多,比較成熟;小公司往往投入不足,做法也山寨。
  • 量化能力。小一點(diǎn)的企業(yè)往往只能作到定性分析,就事論事,最后主要靠拍腦袋。牛一點(diǎn)的可以做到定量分析,這樣能有個(gè)科學(xué)的定義和計(jì)算模型,才能腦袋拍得輕些。
  • 持久性。小一點(diǎn)的企業(yè)往往只做當(dāng)前的case;大一點(diǎn)的公司整個(gè)流程是持續(xù)迭代的,而且是正反饋的,這樣它整個(gè)風(fēng)控模型就能不斷修正和完善。

至于如何去做一套完善的風(fēng)控系統(tǒng),這個(gè)領(lǐng)域已經(jīng)有大量的投入和專家,可以去參考借鑒。我個(gè)人的資歷比較有限,只能提供兩個(gè)參考:

1、如果想從流程上去改善

如果你對(duì)類似CMM這樣的成熟度模型感興趣,不放參考Octave(Operationally Critical Threat,Asset,and Vulnerability Evaluation),這同樣是CMU的SEI推出的,目的是提出緩解企業(yè)信息安全風(fēng)險(xiǎn)的方法論,它本身不是一套計(jì)算機(jī)系統(tǒng),但在流程、理念、邏輯結(jié)構(gòu)、方法論上能有比較好的啟發(fā)。

2、如果想建一套完善的計(jì)算模型

可以參考paypal的架構(gòu)。paypal應(yīng)該是互聯(lián)網(wǎng)內(nèi)風(fēng)控玩的最早最成熟的公司,筆者也有幸成為其國(guó)內(nèi)的第一批開(kāi)發(fā),學(xué)習(xí)到很多。這個(gè)公司的商業(yè)模式就是建立在風(fēng)控上,所以投入也大,雖然就技術(shù)上而言非常保守,但其整體框架絕對(duì)值得一提,

如圖:

上圖是我以前畫過(guò)的我印象中P公司是如何處理risk的(依然是簡(jiǎn)單概念圖):

  • 最大的投入是通過(guò)運(yùn)營(yíng)作人工分析,一方面可以更細(xì)致更準(zhǔn)確的去處理各種高風(fēng)險(xiǎn)交易;另一方面在于找到了很多新的攻擊,人工標(biāo)注產(chǎn)生了很多樣本,這點(diǎn)是最關(guān)鍵的。
  • 大量的分析師通過(guò)數(shù)據(jù)倉(cāng)庫(kù)去做模型、做規(guī)則。最早的時(shí)候還沒(méi)有hadoop,他們靠商業(yè)的teradata來(lái)作這件事,算是先驅(qū)了。大部分模型、規(guī)則也簡(jiǎn)單,頂多是logistic regression,勝在數(shù)據(jù)量大,以及龐大的ops團(tuán)隊(duì)支撐。
  • 相當(dāng)數(shù)量的開(kāi)發(fā)人員,去開(kāi)發(fā)模型需要的數(shù)據(jù),從數(shù)據(jù)庫(kù)里面計(jì)算出來(lái),形成統(tǒng)一的變量接口,然后線上的系統(tǒng)就是在不停的跑了。
  • 整個(gè)過(guò)程是循環(huán)的,在線系統(tǒng)標(biāo)注的高危交易會(huì)被繼續(xù)人工分析,然后成為新一輪的素材來(lái)實(shí)現(xiàn)整套風(fēng)控系統(tǒng)的不斷演化和改進(jìn)(Ocatave也是提出了類似這種迭代的模型)。
  • 開(kāi)發(fā)、ops、分析師三個(gè)角色明確分工,有機(jī)結(jié)合在一起。這是目前國(guó)內(nèi)大部分公司是很缺乏的。

整套系統(tǒng)里面每一塊都比較保守,有各自固有的問(wèn)題,但勝在整個(gè)框架很好。體制的優(yōu)勢(shì)決定了其依然是現(xiàn)存的最成功的風(fēng)控系統(tǒng),豈安科技的兩大系統(tǒng)(Warden和red.Q)也都是受此影響很多。

然而,以上只是描述了一個(gè)有錢公司的成熟系統(tǒng)是啥樣的,現(xiàn)實(shí)世界中,只有極少數(shù)公司能做到這個(gè)程度。很多公司(尤其是中小型互聯(lián)網(wǎng)公司)是這樣干的:

[[173431]]

系統(tǒng)的脆弱點(diǎn)比較多,尤其是業(yè)務(wù)搬遷到互聯(lián)網(wǎng)后,暴露點(diǎn)增多。各種漏洞(技術(shù)上的和業(yè)務(wù)上的)層出不窮,黑產(chǎn)業(yè)的日益發(fā)達(dá)也帶來(lái)了更多的影響。

  • 資源較少。一些金融相關(guān)的可能還好,大部分公司對(duì)此投入不足,忙不過(guò)來(lái)。
  • 可利用的現(xiàn)成的技術(shù)少。風(fēng)控通常是比較復(fù)雜和昂貴的,只有大公司用的起,小公司投入不起,往往就是穿個(gè)褲衩就要面對(duì)各種攻擊了。

上述幾點(diǎn)造成,大部分公司根本沒(méi)能力去做詳盡的數(shù)據(jù)收集和量化計(jì)算,也就很難有個(gè)成熟的風(fēng)控模型或是系統(tǒng)去應(yīng)對(duì)互聯(lián)網(wǎng)上頻繁出現(xiàn)的攻擊,最終就變成了打地鼠模式:

  • 每當(dāng)惡意(帶來(lái)?yè)p失)的事件發(fā)生,被動(dòng)的去應(yīng)對(duì),而且只能作事后處理
  • 每次事件的處理只能作就事論事的防范。這次一錘子不能幫你打下一錘子
  • 量化能力上還是比較難對(duì)風(fēng)險(xiǎn)作定量分析,關(guān)注的指標(biāo)只能是命中率(打中多少衰神加分)和誤殺率(打中多少福神扣分)
  • 當(dāng)帶來(lái)風(fēng)險(xiǎn)的主體比較難區(qū)分,偽裝的比較好的時(shí)候,這錘子就敲不下去了。比如現(xiàn)在一大危害羊毛黨,很難和正常用戶區(qū)分開(kāi)來(lái),造成無(wú)法防范
  • 當(dāng)風(fēng)險(xiǎn)攻擊來(lái)得異常頻繁和快速,錘子也來(lái)不及敲。最近短信轟炸的攻擊行為忽然冒起,沒(méi)有健壯的風(fēng)控系統(tǒng)保護(hù),只能素手無(wú)策

這個(gè)就是我們感受到的骨感的現(xiàn)實(shí)。

作者介紹:陸文,豈安科技聯(lián)合創(chuàng)始人,首席產(chǎn)品技術(shù)官

曾擔(dān)任PayPal資深高級(jí)工程師。參與豈安科技所有產(chǎn)品線的架構(gòu)和設(shè)計(jì),帶領(lǐng)團(tuán)隊(duì)在數(shù)據(jù)挖掘、多媒體分析、跨數(shù)據(jù)中心分布式系統(tǒng)、高性能實(shí)時(shí)大數(shù)據(jù)計(jì)算、海量數(shù)據(jù)采集等領(lǐng)域進(jìn)行前沿研究和產(chǎn)品化,推動(dòng)豈安成為國(guó)內(nèi)領(lǐng)先的大數(shù)據(jù)解決方案提供商。

責(zé)任編輯:未麗燕 來(lái)源: 豈安科技
相關(guān)推薦

2015-07-29 14:16:43

互聯(lián)網(wǎng)金融大數(shù)據(jù)

2016-10-14 13:27:13

大數(shù)據(jù)互聯(lián)網(wǎng)金融

2017-04-21 14:04:50

互聯(lián)網(wǎng)

2017-03-22 13:43:40

互聯(lián)網(wǎng)

2021-03-22 11:49:19

架構(gòu)運(yùn)維技術(shù)

2013-11-19 14:24:29

2022-05-12 12:03:02

衛(wèi)星互聯(lián)網(wǎng)安全

2010-08-26 13:46:30

2012-02-28 15:04:09

移動(dòng)互聯(lián)網(wǎng)廣告設(shè)計(jì)

2015-09-09 14:24:14

2021-01-14 21:43:30

工業(yè)互聯(lián)網(wǎng)標(biāo)識(shí)解析安全風(fēng)險(xiǎn)網(wǎng)絡(luò)安全

2020-04-01 12:15:51

安全 工業(yè)互聯(lián)網(wǎng)網(wǎng)絡(luò)

2020-03-24 10:33:49

工業(yè)互聯(lián)網(wǎng)的網(wǎng)絡(luò)安全網(wǎng)絡(luò)攻擊

2016-11-16 18:49:21

2015-06-24 15:35:54

2013-08-14 11:03:35

2016-10-24 09:48:02

大數(shù)據(jù)互聯(lián)網(wǎng)犯罪

2015-10-08 15:20:34

互聯(lián)網(wǎng)物聯(lián)網(wǎng)

2016-12-06 17:05:04

互聯(lián)網(wǎng) 銀行

2016-01-13 17:44:16

財(cái)務(wù)共享浪潮
點(diǎn)贊
收藏

51CTO技術(shù)棧公眾號(hào)