- 在线时间
- 791 小时
- 最后登录
- 2022-11-28
- 注册时间
- 2017-6-12
- 听众数
- 15
- 收听数
- 0
- 能力
- 120 分
- 体力
- 36451 点
- 威望
- 11 点
- 阅读权限
- 255
- 积分
- 13896
- 相册
- 0
- 日志
- 0
- 记录
- 1
- 帖子
- 616
- 主题
- 542
- 精华
- 12
- 分享
- 0
- 好友
- 225
TA的每日心情 | 开心 2020-11-14 17:15 |
|---|
签到天数: 74 天 [LV.6]常住居民II
 群组: 2019美赛冲刺课程 群组: 站长地区赛培训 群组: 2019考研数学 桃子老师 群组: 2018教师培训(呼伦贝 群组: 2019考研数学 站长系列 |
一、数据挖掘(Data Mining,DM),又称为数据库中的知识发现(Knowledge Discover in Database,KDD),决策支持过程,主要基于人工智能、机器学习、模式识别、统计学、数据库、可视化技术等,分析、归纳、推理,挖掘潜在的模式,帮助决策者调整市场策略,减少风险,做出正确决策。& V) [5 b, J4 {; \
5 D3 F) d3 R% S& ^7 v; F0 Y
知识发现的的三个阶段:1、准备数据; 2、数据挖掘; 3、结果表达和解释
8 [! f K1 A- X$ K3 S, n
- c' u3 V/ d) R5 c. T7 m3 H3 d% \最著名的数据挖掘标准流程:CRISP-DM9 T9 g- a3 i' u0 z
1 P3 U, J: Z1 ?( W \全称为跨行业数据挖掘标准流程,分为6个阶段:业务理解、数据理解、数据准备、建模、评估、发布! x& U1 X- r& P- `. R
" F$ j0 `6 h% j3 B! x% f# E% I. r(1) 业务理解:分析需求、初步收集数据和指标
5 D+ W+ g$ s2 ?
( A8 O2 @+ z) H# D9 @; j7 n5 u% ^(2)数据理解:理解各个数据字段的含义所记录的业务信息。3 t" m4 b6 t) ?* p' x
+ N: M: k% D! E# g2 @, q: q
(3)数据准备:数据清洗、提出、转换,提取样本,清除噪声,处理缺失数据,数据标准化。! ^$ M0 c- g, b" b7 h
" B/ v8 _# B9 P7 R
(4)建模:参数调整使模型最优。
' y( v" s- a* b; Q5 _( G3 t1 {9 H7 @; |2 U0 X# E) S7 }0 A q( }: k
(5)评估:评估、挑选最佳模型。
2 N2 a5 {5 r# `. Y1 {0 V8 h$ z9 v' I% S
(6)发布:将模型运用于实践,跟踪反馈,了解效果,后期优化。' i; d" L2 y" o4 Y; b: d
) e; r* l% R+ _: [ J9 {. R6 N1 k3 VSAS数据挖掘方**:SEMMA, W8 m4 @# \2 P' N c# Y. u
* K5 {0 }7 Y7 q4 M) C6 Q2 Y
(1)Sample-数据取样2 A) F' \( l4 M$ _
- A+ b+ P1 G0 z# T0 w! h/ y(2)Explore-数据探索
' j7 E/ ]- W! }% K& F# o* T) `( U
; R. X' c# G+ \; t3 q(3)Modify-数据修正! v, P" h. ?+ }" c1 T$ b
2 Q: O) N- j4 `(4)Model-建模
! u4 Q8 u1 _* ]' ^$ d0 ], i! p7 h& F; e) ^
(5)Assess-评估1 N8 f, [ G7 u# B/ z+ q- m6 s& S$ \; `. \: W
: b( u/ g+ G3 b$ w1 }" y
+ u" b1 O b# _ y二、经验谈
: Q8 T. W+ }) P* R/ j" g/ }( E9 I" H; x2 Z8 Y3 P, I
(1)明确要解决的问题
! D; B5 N/ h9 t# Q( }( a5 f+ d/ | A, i0 l& g
(2)确定最终评估标准
% N* J1 m1 J% v% t: r
3 r$ W: N0 z0 p(3)设定期望方案
- V ~* e# F" t1 Y# P$ ~4 G2 q# u5 [: h5 j% h
(4)简单项目到复杂项目
3 M R7 s) ?9 `4 F& q9 ^0 `
. s+ \& M# u `! n$ ~$ G(5)团队合作,协调沟通
; H8 K+ e" i* z; x
+ v. ~5 ~5 O# T u(6)避免陷入数据垃圾 [6 \) p4 p5 }+ L3 d* u
" J, U3 b/ [/ E ?' r3 T( \
" `8 m8 E2 ], B: {, U5 ] |
zan
|