初来咋到
- 积分
- 0
- 比特币
- 1286
- 威望
- 0
- 注册时间
- 2019-2-14
|
信贷场景为什么要做反团伙欺诈,针对个人维度的风控不够吗?我们已经有各种身份验证方式、反欺诈策略和模型了,哪里还有什么坏人?!尽管有道理,但一般的风控都是针对个体,一些有组织有纪律有预谋的团伙欺诈,往往会绕开一般的风控策略,来集体骗贷。怎么防范呢?当前的主流方法之一就是构建关联网络和团簇挖掘。那具体怎么做,来看一看融慧金科的智能风控。4 h( f" G5 g0 B' i5 ~6 g9 u
( _6 Y. L# p" P$ y; I0 i# W% u
第一步:构建关联网络
% _0 V8 Z/ _% ~' a. y5 D1 E4 d. ]9 T8 u3 R3 V) x
问:为什么要构建关联网络?
) o f$ Y Z$ b3 V" d: {: N$ }1 S" N( y
答:为了发现贷款用户的关联关系。 c, m$ ^! }1 O& C/ @2 r
6 b; |4 {8 g+ D9 F% N4 Y: o# [& @8 Z* K 第一阶段:设计节点以及关系
: F2 S" R8 _& d- e: A, B$ \2 X 5 A5 D7 k0 Q2 @# A8 Y
, n$ `( t9 z9 @& A" P
第二阶段:模糊匹配+ p/ k. w+ Z7 w. Z/ j% z- X
5 K' {) z# i1 d" N& M$ \ R 问:怎么能够找出节点之间潜在的关系呢?
1 v5 v7 y7 [7 `: R6 {
- a' Q4 [9 i9 @% X 答:用户在贷款平台的申请信息中,有许多文本信息,这些文本信息可能字面不一样,但内容是相同的,这个时候在关联网络中,需要进行模糊匹配,发现其中共享的节点。
6 G1 \" k- S4 D# v
8 i5 n# B5 ?; x; N4 ?7 k+ k 如果按照下图前半部分进行分析,两个人公司名称不一样,并无关联。然而在这种情况下,“萌萌公司”和“萌萌有限公司”很可能是同一家公司,只是用户在填写时没有写清楚,这个时候我们需要进行模糊匹配,再进行关联,便能找出关系。
% z- }$ e4 i3 h9 L W7 Q. }( u, d% A4 K+ @* j' N" G* q: @
一般我们常用三种方式结合进行模糊匹配:
4 q1 e' d6 D, _& S8 I
2 G* c8 q9 |9 ]) q1 p ①基于规则补全信息,如在公司名称信息中,补全“有限公司”等场景特有字眼;
A! Y& ?3 q) J0 c- B2 @+ w S: k! H* K0 y
② 计算文本相似度,方法有很多,比较有效和快速的如 minhash法和 simhash法;
1 ~( r0 d+ K- h I" H: E6 A
. I& l0 m, B; j N ③ 基于语料库,如公司名称库,地址库等。% Y$ }1 y: G2 D& N) U$ e
, K" U$ {. H% y+ h( a( v( j2 e& Y6 ~
0 b3 c D1 }$ V% S& P6 b! O6 K0 T
第三阶段:补全隐藏关系9 ~. D: N( e& u# ?% T6 P
3 w+ X8 r7 u8 {& v
模糊匹配后,只是将用户所填信息进行充分挖掘,然而贷款平台上的用户申请信息虽然没有关联关系,但可能他们在现实生活中存在联系。
. p5 k; m% U4 j5 M1 {. M4 R2 o
% Q( r' q% o( C, n7 h 示例:
6 K3 [# _" I0 E- b. ^8 m
7 I+ d( F9 y( k 如果是团伙过来平台欺诈,申请信息不会露出可疑点。当我们找到他们实际有所关联,关联网络就能展示出两人的关系,我们就至少能推测出他们是相互认识的。
: Q1 W* s0 b" ]+ @/ x$ \. L
# k* U8 \2 m% D* |8 `
+ a6 H0 X0 s+ Z, ^
9 ?/ c& [9 C O 但有的时候,捕捉的数据可能被恶意篡改,如刷机等行为,融慧金科依靠海量数据源,精准定位到用户的各种画像数据,帮助合作准确构造关联网络,感兴趣的读者可以官网找融慧君。
' ~' X- p. H K/ A7 D8 ?: i! Q! H, X, E& z- t
第二步:团簇挖掘和分析* }. l' m0 E2 B& _: w7 Z
f( G" S. W) m; H H- [5 L9 P
构建好关联网络后,下一步需要缩小关联网络中的团簇范围,然后再分析挖掘这些团簇。8 E6 S7 Y: s$ b7 `/ p( w
% H) v# p9 f3 n$ f* l3 Y 第一阶段:团簇发现0 U, O4 a: ]1 ]: ^+ V! o
" A' ?# p, ~# W$ ~8 D 问:为什么我们要做“团簇发现”呢? - _4 |1 O$ w6 J6 `( ~
* E) T, @! [& x) j4 q' L5 b5 z 答:团簇过大,会导致节点间原本并不直接相关,却被误杀错判的情况,所以要缩小范围。; C& |! F* }4 Y& T: [6 e
例如融慧金科认识在看文章的你,那融慧金科和融慧金科的朋友以及你和你的朋友都有关联关系。但融慧金科的朋友和你的朋友并不认识,所以要将这个大团簇进行分割,剩下你和你的朋友是一个团簇,以及融慧金科和融慧金科的朋友是一个团簇。 m6 i( s9 o k0 c. H. ~" |( Y
4 P! f' t& o5 j q
v5 m) P+ `! Y; Z4 Z 问:那有什么方法做团簇发现啊?( ~6 Z. x# K/ o" K
' @$ V1 z0 L, }+ U% M
答:工业上还是有很多方法的,下面就给大家介绍其中一个经典方法。( m. {7 p$ v( {8 b6 q. v
8 l: F* ` T, }& L$ o% Z. A6 m$ }
融慧金科在这里介绍社群发现中比较常见的Louvain算法:
% f1 n- Q/ ?: `% W# z
, ~5 n4 A6 X: e1 {5 q, L- j. u: N6 _5 _! Q; z; v9 d2 @' U4 n) u) k" Y+ m
当挖掘出可疑或关联性比较强的团簇之后,我们就可以进行分析挖掘。$ Z7 V- Z! O' Q, d( q
7 m4 P+ e- B) A8 G: Y% j, n0 A4 A$ x! |- L
分析挖掘是一门深奥的学问。在一个团簇中,有可能有多种情况:
3 f1 j/ H8 i/ [5 D7 h) r9 [ j4 R8 J
A.整个团簇都是欺诈用户(如黑产)
# \; ~2 e/ L! P( x* t
# i( G1 s: V& t5 Y B.部分是欺诈用户(如黑中介)
1 u; Z$ f4 g2 o0 @$ O( f" q
2 {8 R; X# m( y- W% M: V+ l C.整个团簇未发现欺诈用户
$ U3 r; f- Q6 T+ |4 Q5 y4 z6 q) h
* d$ w$ K: z$ L' X; u# V# M' [ 接下来,就是要针对这几种情况采取不同方法。0 W7 C! U: Z) l& A3 v) N8 O6 S6 u
4 e( i8 C3 X7 I9 o; a 第二阶段:团簇风险识别& k+ s B! o) q: b4 z
) h; \; ]; h" ?. K6 u
对于上述的情况A,关联网络中的一些团簇可以利用规则策略识别欺诈风险,这些规则策略因平台而异,下面将列举几个在关联网络中常见的规则策略。0 a3 E/ V: u, e5 y: ?- N5 d! H/ X; o$ {; A
D2 [/ r+ @$ }6 p [4 u9 S 不一致性检验7 Y& I, X: {. Q) s1 d# y, F4 A$ L" i
6 N2 S) y- t4 ]7 f# M& X 在团簇中,如果用户的信息与我们的正常理解有严重偏差,那么这种团簇很可疑;
( r. I) S" h$ f" e: A
+ {+ r9 T0 Y, }8 }# g6 w, a! v 示例:8 Q# J4 [ M |) }1 T4 a: s* e
, k- @* ^1 a( ]3 i N- M" z+ R% ~ D0 l5 I8 @& t
如上图,两个用户在平台填的节点为蓝色,从融慧大数据中挖掘出的节点为灰色,根据上图,我们可以发现两个用户共享一个家庭wifi,但是填写的家庭地址却相距很远,所以这样的团簇很可疑。
! c( w9 P8 j0 `( @, w5 k) [* b! S
/ Z# b4 J# I" t! G+ K 团簇黑节点过多且团簇紧凑
; B1 d: ?9 H: ~/ z; A4 \* D' @9 J
在一个封闭团簇中,如果黑节点占比过高,且满足模块度要求,则为可疑团簇。
$ z$ }4 C w R9 l 示例:
8 W- d1 A7 t, ?* c+ [
; Q; T; d# q3 W# N. l6 ^5 @$ g3 z, Q* }3 |; z) G* [4 T. p
如图,红色为黑用户,蓝色为未知用户,此团簇的黑用户占比达66.7%,高于阈值,且满足“模块度”要求,视为可疑团簇。# a) b" _, q4 i/ u9 ~
7 P5 o8 c' n' f1 K4 p9 }- {
但如何能够知道黑用户或者风险标签呢?机构可以通过外部数据源进行补充:融慧金科智能风控反欺诈风险名单不仅能够识别潜在欺诈风险,还能提供风险标签,为团伙挖掘提供数据支撑。 t$ m# @# D+ c; ~, R: @
4 E A, N! I8 l- | E! p
第三阶段:节点挖掘
7 M( w3 Z2 ` W3 `* F! o
1 @& l/ m1 K! [% k2 M1 {3 o2 E* k& y' b. ?4 p
针对此前提到的情况B(团簇中部分是欺诈用户),我们需要再分析节点在团簇的地位,一般在“无标签”或“有标签”两种模式下,可视为可疑用户或者直接拉黑:$ F5 ]) a$ ?% i [$ g- Q8 M
& l' q6 p l6 P- R- A/ ^& A
① 在无标签的情况下找到满足某些规则策略的节点;" ~0 T" n/ w2 o5 l. r6 e
6 J" b" S5 Y7 M: ] ② 基于已有的标签信息,与已有标签节点邻近或者结构相似的节点。
, b! l3 @: b L- b& g$ m7 M# o/ y* J& r0 R) m4 Z5 I7 J/ e
下面列举这两种情况下用到的一些方法:& E: H1 M& l" j0 W9 R
! g0 Y7 \+ ~0 m. t% O
①无标签下找出可疑节点:团簇中所有节点都无标签,根据结构找出可疑节点。0 x; K$ Z2 K; h" P, S3 p$ }7 X# `* n
9 W$ B0 f# m$ _- v4 w2 T, m* T1 W( j3 |# D e( Z4 c+ N$ W
②在有标签的情况下,找出相似节点:如果团簇中部分有标签,分析团簇中其他无标签的节点与其是否相似。4 @, W, ]6 F% g/ Z
, U& M0 z6 l/ y* k+ R# a
/ A) C W5 V4 n7 z (融慧金科智能风控小提醒:如果不能拉黑团簇或者找到黑节点,那目前这个团簇暂时都可认为是好人,属于此前讨论的情况C,就不做过多叙述)6 m+ C+ C" w) R3 U5 q0 ?
5 V! x# E1 W$ x9 h+ D( ]8 R 第四阶段:特征构建
* n$ r% z3 h y4 g6 U. z0 Q- W3 P1 F8 a. m
问:除了拉黑,关联网络还能有什么贡献呢?. ^4 {% Y) t+ d$ X) V! H
- V3 |* L7 U8 z l4 [* R7 `8 y0 m 答:关联网络除了自身的分析挖掘,也可以从关联网络提炼网络结构特征或者根据网络结构更新原有特征。, T F& r' {2 W5 b' D; ^) ~8 z
$ f" C. _& o/ [+ b
3 j$ A) @8 h* R7 _: w3 v 在关联网络中提取的特征或更新的特征可用于有监督模型,提高模型效果。2 m1 T$ G5 G5 o9 A2 J
4 h) ]' ^, D/ E# c+ F 第三步:动态分析
! m: Q) A$ J" X1 C- r9 N
& f: J4 k! n r, Z8 |4 W. _ 问:前面不是都解决了吗,怎么还要动态分析? ( d% E5 [: [: ~3 o
5 I) F d$ z R 答:此前我们讨论的情况都是基于静态网络,但实际业务中,一个团伙往往不是在同一时间段申请贷款的,网络动态分析是为了在团簇小规模的时候发现欺诈团伙的苗头,将其拉黑。
6 `' ?- b+ h& u0 x$ d* V3 E# U# T! K) p0 N$ T
我们在对于一个团簇,可以回溯不同节点时的最大度中心性和团簇规模的关系,得到下图:1 S2 H! e& c& m5 R
8 Q4 Q+ U* y0 p) H! c# N$ ~; a' ?$ O9 r F
我们可以看到,在最大度中心性从4开始就增长迅速。" c9 H* ?6 l; ~( \7 p) x
另一方面,在业务上欺诈团伙往往会在短时间内申请贷款,把团簇规模按照时间顺序进行分析,可以得到下图的示例:7 C) a+ H3 @1 D0 [* R* c
$ h% B( _, ?1 H* @$ S. w
" n$ c6 U6 C# j7 u7 @) r+ g 根据上图可知,从第一个节点申请的第三天起,团簇节点数开始快速增加。+ C4 ?3 ~ W: n% K4 M, t+ A
( x4 H0 T1 [! q7 D9 t" ] 所以根据上述的两个曲线,我们可以拟定类似的策略:在团簇进入平台的3天内,如果最大度中心性大于4,则冻结中心节点的额度或者拉黑。7 [/ _1 \* D; l1 u3 H( z5 |
/ u E8 v" l+ k) \( r
实际的阈值和观测指标都可以根据机构的实际情况而定,上图只是一个示例,仅供参考。4 L2 G; v+ y- W; d( P- R5 Z3 N
- b% x* W8 a7 m9 ? 总结9 ^: l6 L* u$ z' p4 d- g
3 L% M- M* I7 q1 K 千言万语可以凝聚成这张图:4 Q. S1 d5 q6 ^/ N! m X
M6 B. }( [: S0 h( @8 V
5 }3 A4 F4 }* K2 T$ u+ x" T |
然而在实际业务中,并不像上面那么简单,技术、数据、经验缺一不可。; ]' P( r2 ]2 Q" [
4 m! q4 }: x( |3 ~
" a0 \/ u6 S; \* k# K/ | 根据自身多场景数据源及独特的技术,融慧金科智能风控的实时团伙分产品可以及时捕捉黑团伙和及时止损。6 Q' {$ \6 e: j8 l+ H
; C; R% }) f$ Y0 H& i# a+ ]/ S
9 F4 P+ \+ H( d) @' P 与常规的指标相比(左图),融慧金科智能风控实时团伙分(右图)能更早更准确地拦截团伙,挽回损失。3 [* g1 a8 [8 [2 s! P& V a( w6 c
6 k q; E* y* | x1 F
& Z9 ]* X5 }7 V- U 基于12亿+月活的设备数据及关联网络,融慧金科智能风控打造出的团伙分帮助合作伙伴在数据不充分,甚至团伙未成型之前可以有效拦截团伙欺诈。感兴趣的读者可官网咨询。 |
|