QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1981|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1198

主题

4

听众

2976

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
5 U' @  q- G! `$ g1 l- C7 j% {$ k" \( N) m: Q
### 1. 标准化(Standardization)
0 S0 V& z# G- @# i) ?  l+ Q% j! _' Y4 O
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。! \' ?; t# |! A
8 m6 ~8 _7 ~. @/ D/ Z! B
#### 标准化的公式
7 d# L+ E4 g2 K& ]3 j$ m5 S
9 x: {+ R$ X  I9 G对于一个数据集 \(X\),其标准化的公式为:
/ [2 H. w) v' N4 P1 J: {\[+ x* z7 \1 s. V9 V2 {  D
Z = \frac{X - \mu}{\sigma}
' S0 O2 C7 R, ]9 k& k$ A3 g/ e! B\]
3 L; s# H' Y! E2 g2 m其中:
6 ^9 g8 n) c" k9 Q8 J% }- \(Z\) 是标准化后的值。
% t9 M7 h+ S# ^8 i) \1 ?- \(X\) 是原始数据值。7 B& R' c1 P. h/ J
- \(\mu\) 是数据的均值。
  S% G. X- x7 B- Y- \(\sigma\) 是数据的标准差。
8 B& r% Z8 F  d& A' ~
: ^+ O  D9 S+ z' M9 t0 I: {1 y6 m#### 标准化的特点9 s! g+ S6 x- g# |
9 K% T0 l; L/ y, Z
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
3 J: D! @& ?/ |% m( Z4 L- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
4 H' E7 b9 P% k: y+ ~0 y0 D- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。8 p5 M! V8 S* N: J9 j/ V6 A) ^
: p; W9 J, S$ P' D" \; V8 Z1 j
### 2. 归一化(Normalization)
6 m5 D' A+ v! c6 d+ D4 Z5 H
/ ~! \& w5 X1 l0 o8 T% w- {归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
+ O4 ]$ n' z, q: G- t7 r7 O) v
- i9 g" P2 k' {* E#### 归一化的公式: H& H  Y- c1 }+ l9 N

3 @) D7 M# e" f对于一个数据集 \(X\),其归一化的公式为:
5 [3 [4 n! V: ~. R! {' h6 X\[2 g, S' s, t8 P, X' T
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}5 O4 ~( W" ^3 B
\]
8 `4 f5 U- \* }4 c, p. Q  E5 ~或者对于[-1, 1]范围的归一化:
' B! I" G8 X% X7 a( d\[2 f( ?* f6 p  }$ N8 r2 U  @# `
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 14 I3 ^( M6 g& u; ]
\]; V9 X" Q. D9 a
其中:
9 Q5 e) }5 H. Y; Z" H% ^( T- \(X'\) 是归一化后的值。
. h: K2 f  @( t5 w- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。5 _7 L1 ]9 N7 \5 `

8 ]( q5 l+ R# I) p9 S3 T#### 归一化的特点
8 N6 @/ i( Y- @) T+ a# a! g
6 @5 A0 `# K  ?4 C/ T) i- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。0 l/ m' E1 l% t+ z1 O# c
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。0 V+ `3 d- `) K; \' N! p* B
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。/ ~3 |( ^& h) ]: K" H: _

& o  W8 M1 L; S" g9 y1 M### 3. 标准化与归一化的区别2 ?2 y# n5 U; ?' \/ N4 K% [% f

. I6 Q3 m$ C7 t2 R8 d9 M1 ~7 o2 ^| 特征          | 标准化                      | 归一化                      |
* Y% _. o# K( ^# o) n. R( g& X|---------------|-----------------------------|-----------------------------|0 g9 P0 S9 w/ T+ W) f
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |' `, t7 G( S; r8 ]8 |
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
- C6 @$ n# K+ l| 对异常值敏感  | 是                          | 是                          |
- B# K8 a7 I  \$ \* I| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |' C3 b5 n: S% L9 j% n# y% G
7 r3 r6 f( A% C' ^4 `" p
### 4. 在时间序列中的应用" L, Q' d  P7 f# o9 ~8 I
4 h) u( p1 o# N* r3 V! R
在时间序列分析中,标准化和归一化可以用于以下几个方面:
: y: K$ t  Q/ F& v0 W! R" m# P
- [6 ~3 R/ u. f6 m7 M- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
. M! b7 x2 P! E: g( ?0 v- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
9 E' }, |8 r, K+ \. k3 j- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。8 l8 G+ m* O8 p+ B* r

- N+ U9 |/ ]% C7 F+ H### 总结8 G6 R  R: @# U" P0 D! M- a' g

. S$ p3 I: }2 Q3 {& y3 d标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
* y8 x+ s# h" W3 B& Q3 |* b) j. ~! O4 W  M7 A* b9 b
+ l! Q3 G/ H# g0 ]% E/ o7 Z5 A9 i

& S+ h6 U% d6 x* s$ J! z

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-9-13 18:29 , Processed in 0.888691 second(s), 55 queries .

回顶部