- 在线时间
- 1630 小时
- 最后登录
- 2024-1-29
- 注册时间
- 2017-5-16
- 听众数
- 82
- 收听数
- 1
- 能力
- 120 分
- 体力
- 565636 点
- 威望
- 12 点
- 阅读权限
- 255
- 积分
- 174914
- 相册
- 1
- 日志
- 0
- 记录
- 0
- 帖子
- 5313
- 主题
- 5273
- 精华
- 3
- 分享
- 0
- 好友
- 163
TA的每日心情 | 开心 2021-8-11 17:59 |
|---|
签到天数: 17 天 [LV.4]偶尔看看III 网络挑战赛参赛者 网络挑战赛参赛者 - 自我介绍
- 本人女,毕业于内蒙古科技大学,担任文职专业,毕业专业英语。
 群组: 2018美赛大象算法课程 群组: 2018美赛护航培训课程 群组: 2019年 数学中国站长建 群组: 2019年数据分析师课程 群组: 2018年大象老师国赛优 |
风控建模】互金 风控模型岗 基本要求及面试问题总结
# I* }: F9 M% O8 Q" c) B一 准备工作
- V4 s. L# F! @8 B# d5 e" }3 O/ `! y0 \* W( \( ?
根据核心职业CD法则,找工作前,你得先清楚自己有什么,自己要什么;面试单位有什么,面试单位要什么。就笔者近一年的学习及工作经验总结而言:0 S1 [: h, k2 q$ R# @
: s; L, K( |% Q+ j 科班同学,最好直接从统计分析、应用统计角度入手,从事金融、生物、医药等领域里的数据分析或数据挖掘相关工作;
- [4 \0 f! Z- Z" x1 P. a* ?
7 O& Q3 ?2 O$ @7 M 非科班转行来的,建议直接做金融,需要的专业知识不多,行业知识也易懂,而且信用中国还有很长的路要走,在这个领域扎根越久,收益越高,因为我们要学的这些知识首先是保值甚至是增值的。可掌握的技能基本可以选择大数据、数据提取、处理、分析、建模这五大块儿,内容及要求总结如下:" o: }4 x" J/ N& L$ P6 i& d, ^! g
8 f: z# Q. A4 C" O9 o前搞MIS(报表分析):业务报表及报告的生产,掌握excel手动报表汇总、透视等功能,tableaue等线上BI报表制作、分析。
- V# h( d: _) P
% A, v s& E- ^0 r2 `9 y后搭数仓(数据提取):数据仓库,包括关系型、非关系型、大数据、图数据等数据库、数据表的设计(常为后端人员开发,数据人员需要了解表结构、字段类型等),数据存储、提取、转换、清洗、处理;需熟练掌握SQL、HQL、NQL等语言,可以做json、dict、frame、pkl等数据格式的转换。
! s8 [ m1 ?2 C8 `. e" V5 Z
8 Z( J W Q9 V/ g' j7 z9 w- S8 j左建模型(模型开发):金融风控模型,不单单指评分卡,而是针对产品营销、定价、授信、管理、催收、监测等业务流程开发的一系列策略、规则、评分卡的集合,通常我们认为,利用有监督、无监督、半监督、深度学习等算法开发的评分卡是风控模型中卓有成效的技术。
' n- K8 S1 I M3 U6 P% m$ t& t) x3 m. q- L _+ ^
右通算法(数据挖掘):LR、RF、XGBoost、SVM等常见算法。对跨领域转行过来的同学来说,算法这块,既有趣,又神秘,关键还难懂,让人又爱又恨。好的算法工程师,需要扎实的计算机算法、算力、数据结构等基础,需要扎实的概率、统计、多元回归、矩阵等基础,我等渣渣励志做算法的话,3~5年起步吧。
9 { s# |1 V; ]# {2 M, y5 w! n( m& P! ^; Y+ O9 t- x9 J
核心懂业务:P2P、消费分期、现金贷、传统金融、大额、小额、信用卡、车贷、抵押、资产、标的等业态;风险定价、反欺诈、信用循环、信审、提额等环节;滚动、迁徙、账龄、递延、回收、坏账等指标。要懂的东西,也多也不多。
2 G0 W1 J7 G: e" t L* b' \4 F( Y$ Y4 m$ W7 ]" q& j
所以,除非奔着算法工程师去,否则最好的入行策略就是熟知行业业务流程,从数据库、数据提取、数据挖掘、数据分析、风控建模等岗位中择一良木而栖,夯实基本数据提取、挖掘、建模等流程所用到的技术。算法这块儿,只需要掌握常用LR、树模型等算法的原理,能够使用编程工具实现即可。
; Z- }! r& C7 R: c, F0 u
% d6 B3 M2 P4 {& n+ i, W2 S+ @! `5 D1 I; A
画个VISIO:![]()
9 N- F0 G- j0 `4 i; G# B4 e' o5 U9 r: ^+ Q' V
所有知识点都掌握,并且能够熟练运用,已然建立体系,胸有成竹,你就可以骄傲的自封一个全能数据战士的名号了,简直朝阳区中最靓的仔。(悄悄说一句,全栈离经理和总监更近,产品、前后端都得给你点个赞)/ Q" I- G/ K: z7 \! \! V" L
, b/ O" G* ~. D' L) n1 s* ?8 L 那针对金融风控岗,我们的面试准备工作,就从以上几点出发,重点从模型着手。) F( q: j& a; `) x" A# j) E( T
5 ` z: ~' x+ B v% @
1、行业经验
h' F9 i( ^8 z# K- M! H0 u3 E8 b# I' P( a7 v
互联网金融风控岗位的业务理解,比如:信用循环体系;核拨率、递延率、坏账率等运营指标;滚动率、账龄分析等分析指标。
3 n5 R9 T7 ^' D& b风控模型的开发流程,比如:信用模型评分卡的开发、上线、优化等过程及方法。
+ b8 O6 E% A' r. I! |: B2、知识基础- x- I `, a; \7 g) P
7 d) s% L/ n$ |3 }# M% J/ H/ A1 C(以下详细内容请看笔者其他相关文章)3 C- A+ L2 `- a0 P4 y m- @; s) M
4 [6 j& y+ q1 T, I! @ N: y% A数据存取与处理: 基础能力,这是数据分析类工作的技能基础,也是任何一个数据类工种都需要的基础能力,不熟练的话就再学一段时间。/ N8 {3 ?% q+ w# B4 V% C3 J0 P; b
统计学习: 机器学习的基础是概率论与统计学习,这块儿你可以不必特别扎实,但像五位数、方差、正态分布、相关系数、假设检验常用知识点得了解并掌握。) ~" X. M L, p$ g- r
数据挖掘: 不论是规则还是评分卡,风控建模类工作的大量工作内容就是对用户特征的挖掘、定义、扩展、转换、处理、分析、运用,以产生对业务有帮助的决策数据。所以特征工程来龙去脉需要懂,并且会熟练使用。- |# y' t" N) n8 f% Z( U# |% Q$ F9 I% l% Q
常用算法: 用于特征工程及建模工作,同样不必全懂,但一到两种常用算法的推导及一到两种融合算法的原理必须掌握,常用的元模型为逻辑回归、决策树;常用的融合模型有随机森林;神经网络则有ANN。3 c5 \* h9 e/ I' N7 u( y, f1 }
3、代码能力
) C3 ^7 D' L" h. J4 D
3 f' p# e/ I" _+ t9 e6 ?! R2 j+ V* H/ Epython | R | sas,把一门代码类工具运用熟练即可。就python而言,像pandas、numpy、statsmodels、sklearn,这几个包学扎实就行。1 f) v, a) e8 O+ {7 J" @/ U- J
(选工具的话,建议python,别问为什么,怕被隔壁用R、spss、PHP、java、excel的媛儿们暴锤)
8 e' _4 V i) Y) \
" S- S2 N, b% A5 e二 面试问题
4 D. r$ h# v+ J) V( P$ i, J- l5 n
2 U6 h+ O1 d% a( |1、风控建模# k; h6 h; X$ F ?. L' @9 |
' m( I) h8 m5 O$ @6 ]4 b
谈谈你对风控模型的理解?/ g2 Y9 _9 ^7 M
- k$ }6 b* Y l( c0 Y: l5 `6 D模型如何设计?# f; u& Q9 t, N' h$ r: V9 u& F5 X
可以从滚动率、迁徙率来回答,也可以从反欺诈、ABC卡回答。
! C9 B: z" o5 m- i' j j+ p6 b4 N2 ~( D, M; j$ C M5 h( p
对客群进行细分建模的本质是什么?* _* P+ C* M' c5 g, G
其实分客群进行建模,实质也是一种交叉特征,能提高模型稳定性。7 M4 s( n+ ~6 N ^! S# b" j
" q0 d! U& z$ q1 A( x% z拒绝推断应该怎么做,作用是什么?效果怎么样?6 i. t" h1 e- b. s3 a
(多查资料,博学审问慎思明辨)
: u% w8 h; Q! n( B
\! V( h: |6 Y* @简要说明下标准评分卡开发流程
9 E7 U6 I/ j! _# t9 U; G(多查资料,博学审问慎思明辨)
4 ~" A: X8 b# t! y& S9 M, `
) S; a0 ?* k1 |7 t% Y5 C' c2、特征工程# {/ _9 K+ ?/ c; D# `0 G, \
. S" d5 R4 L. L% R O如何对数据做质量检验?5 |- r' J( A- j; k2 `
在完成数据匹配工作之后,建模之前,我们需要对数据进行整体的质量检测,主要有两个方面:& w+ g/ p- C: S" ]6 F
1、数据分布。4 `; d1 y% N/ W* ]! m/ ^6 o5 V
2、数据集中度检测。$ a6 W, v' G7 \+ S0 @ E
3、数据脏乱情况。缺失值(是否隐藏风险)、离群值、错误值、重复值,根据其是否符合业务逻辑,判断数据是否存在异常。
* j( W4 y1 L J特征工程流程$ Y9 ^; T' P5 ~7 P& s m, v
关键词: 特征预处理、特征选择、特征衍生、特征提取等。用到的技术主要有连续变量离散化、分类变量哑编码、卡方分箱、特征编码、共线性检验、PCA降维、交叉验证等。& X0 b0 ]* v* c) k5 ?2 {
筛选变量的常用方法0 a8 i- K. y3 _/ ?8 u2 _1 f$ W) \
筛选变量有很多种方法,随机森林、GBDT、逻辑回归显著性、VIF共线性、相关性图谱等、随机逻辑回归筛选、递归法筛选等。
; \0 Q& m( q3 p A1 n2 B好的特征需要具备哪些优势?
0 A+ X$ W _& ~2 U7 J4 L1、稳定性高- d! y' A/ `- G
2、区分度高( F; L+ ~" V s( g- G+ T
3、差异性大
( `* o/ G& O, j, P2 J4、符合业务逻辑. l. y7 K) q. ~' I
如何衍生特征?; e. [. j! T2 F
变量的衍生并不复杂,通常我们会从三种角度出发:% y: P# }2 r; f1 M7 ^) C1 _: P
1、数学运算。求和、比例、频率、平均等。/ |2 H. O' b6 D1 o
2、时间窗口。有些变量的意义只有在一段时间内才有效,所以针对时间比如说注册如期、交易日期等变量,需要计算其到现在的时间段,完成变量的衍生。) E$ ^3 u( \4 M+ D9 m( ]4 }: Z* P# {& `
3、交叉组合。GBDT\XGBoost、LDA主题模型、用户画像分等等都可以做特征衍生。1 |) {) H4 R% ]; L! {. E, x R" L7 B, `
衍生出来的特征要符合实际业务含义,并且要保持稳定。 H+ e8 @ `* o+ N9 {5 D- s
3、机器学习算法, \; i: z: Z; ^/ R& u
2 {' ?' J9 x5 l3 E6 \" k简单介绍你熟悉的几种算法及其在应用场景中的差别!: d2 D. H1 h* [
一些基本公式的推导,比如LR、xgb之类的,这些可以自己推导一下。
) I( |; ]5 I; O/ K简单评价几种常用算法的优缺点:2 B/ d4 F7 z/ e \$ D0 ^* @
1、逻辑回归
: Z3 \* `9 X# A) w( ~8 Z优点:简单、稳定、可解释、技术成熟、易于监测和部署- k3 A& i- _8 _# J, e4 ?4 J6 |
缺点:一定不能有缺失数据;必须是数值型特征,需要编码;准确度不高
6 r( U1 k$ f3 A' k& H2、决策树$ k2 e# a( V1 ]# C6 J' T6 N# s
优点:对数据质量要求不高,易解释% X! v. O5 Y" S
缺点:准确度不高' j$ T& r) \' S' y$ s& O: Z# X9 e
3、其他元模型/ V2 _( l$ G2 p; L. ~! ^
4、组合模型 d3 Z1 P" \2 l% O) j% v6 ` j
优点:准确度高,稳定性强,泛化能力强,不易过拟合
* `# }7 b- ~# h7 s3 F @& ?+ {缺点:不易解释,部署困难,计算量大4 f% V" c2 S, i7 c; Q+ i- [* U5 H
4、模型评估. U2 F. x# |2 [$ Q$ G
% W- R, C5 }% E1 O1 e8 D, o
模型评估的常用方法?! G* ]* y( a+ C6 Y3 M9 i* A
从三方面回答:
# d( q( `, M4 w# U+ m% G* }9 }$ M1、区分度:主要有KS和GINI指标,理解KS的定义及用法
% h0 r9 t( Y1 l* C3 H2、准确性:主要有roc曲线和AUC指标,理解AUC的定义及用法- y/ C' C, U; G; x/ b- a
3、稳定性:主要有PSI指标,理解PSI的定义及用法" |# f1 w1 _5 H' A2 r0 `9 T
auc和ks的关系?
: ^3 J8 \4 P1 D( M# z1 M) F5 u% e有人说auc是衡量整个模型的排序能力,KS是衡量某个分段的区分能力。
2 M" c7 Y5 q: t" A! f$ k5、模型部署
3 ?% t* Z2 l2 t* A4 A9 \7 J, j
, m3 d; p7 }% P5 g9 K3 T模型的部署上线应用类似的问题,偏开发,分析人员可能不太擅长。主要就是api接口安装、测试、等级划分、额度设计、风险定价、ABtest的设计等等。
' A7 m2 M p8 j$ Z" E# K6、模型监测# t5 a% l, q# k4 a# }0 ?2 K- }- ~8 T9 }
+ Q3 x: i5 g! ~. Q# B0 \
上述一些运营数据和风控指标的关注
. u# h7 w* K) f ~三 写在后边
3 \; p( A$ P* K
7 Z. A" f+ y* N! `+ t 在全世界,分析能力都有同质化的趋势——大量的技术已经进入这个领域,壁垒几乎已经没了。长期、可持续的优势,来自企业拥有的人才和你手里的数据。" ?( p% q9 T- D- ]. }8 _% {
4 h% B. @" `) E6 ?
总体而言,中国的金融科技市场是全世界最先进的,而且领先了很多。不过,在一个领域,中国的进步没有世界上其他国家大,那就是综合数据分析领域。如何更明智地使用数据,是全世界留给中国人的机会。4 U) J" |5 J; q1 X
8 S, k8 }, d" D4 Q5 C6 o 关于学什么这件事情。原本一直非常犹豫要不要学习编程,现在非常明确了,这件事最好的开始时间是大学,其次是现在,而且必须是直接掌握最先进的编程语言,主攻数据挖掘和数据分析的方向,并与这方面的专业人士建立链接。, s u2 O+ d: V, d: F9 I! B- p
——北大经济学博士 香帅老师* j# O: T. c4 f& e! |: Y
风险管理绝不只是数据、模型,它是产品、流程和分析的有效结合。好的风险管理能真正理解流程,真正进入流程、着眼于流程。它能理解产品,理解客户和竞争对手的意图,然后将数据和分析与之结合。2 R- A! k3 S, g9 S h/ C
——数据驱动风险分析之父 阿什·古普塔
& v6 c! b9 v6 } 别怕,难者不会,会者不难,稀缺意味着价值。每当坚持不下去的时候,回头看看你自己走过的那段路,虽然曲折,但异彩纷呈,关键还有这么一群可爱又努力的人陪着。
8 B0 M X$ P; p; |9 S/ _. [8 X. C; W3 g
总结经验,昂首阔步,心里装着善良和坚强,到哪都会散发光芒。% S# k: F9 M" w* v \9 ?$ G6 _# r
6 S4 r# t+ w- _, L( y
0 y6 ~/ P! @# m
- ~+ a' U, J$ A2 z
0 W. T6 E# k% a1 O
2 R+ F- _/ z1 d, K1 b; e
& d6 j, K R$ F3 C/ B6 b( O) ` |
zan
|