QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1830|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1186

主题

4

听众

2922

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。2 j" [1 y; b' q5 x

' K5 H4 [$ I$ o* Y### 1. 标准化(Standardization)
6 Z& K) L& x8 k6 v  `3 G. F2 D, U: ^( s4 }/ `# o1 V5 r. B
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
) \. e" O8 J3 p5 I7 c! }
3 c) L0 F1 X+ g1 r8 i+ S" `#### 标准化的公式
, y+ w) s" \1 C" K
9 T2 n5 S+ o8 \; f4 A. Z& y8 l对于一个数据集 \(X\),其标准化的公式为:
9 Y: M) E4 c3 C4 Y4 z: C\[4 h' [3 K$ l. R& m: w  f
Z = \frac{X - \mu}{\sigma}
# x8 h9 s' P, X# H\]4 j) e2 \2 y+ `/ ^6 u
其中:
" _9 ^  s* X! }9 a- \(Z\) 是标准化后的值。7 |1 Y: o3 S/ Q2 Y3 Z) g
- \(X\) 是原始数据值。5 c- N: `$ [3 U! D* q" e$ M( S/ t; x
- \(\mu\) 是数据的均值。
/ g) [+ L' ^: }9 a- \(\sigma\) 是数据的标准差。$ G7 z0 \* k2 `: k
. F- C7 W8 _( a4 p
#### 标准化的特点
* ^8 k* h: {' ?5 A# g" ?
6 I: p3 X! G- u! l0 H- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
. \* E4 G2 V1 V; ~0 b8 O; Z- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。0 z3 e. _9 J" _7 j2 C7 G! z
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
1 {( N( y6 g& s: X) ], @; W8 q4 J! q8 j& s* R
### 2. 归一化(Normalization)
( r; h& M( Z' q& t
; `$ T& e0 ]" ~8 ]: @6 }9 ^归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
$ q; m* M) p/ r8 o; v# i" F6 l; Q, o0 x) S, t1 O4 f
#### 归一化的公式
8 H% x6 z- d, i+ `, W* r8 `) [$ W
) _9 A9 ?' I9 w5 m- o对于一个数据集 \(X\),其归一化的公式为:
& o% Q! v" s, B0 |/ S\[7 N( w5 g7 K( j( ?6 d- P. K3 B1 E
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}: o6 {7 K9 R9 o# C7 K6 o
\]; Q" C0 y: W' ?. m% ^
或者对于[-1, 1]范围的归一化:
9 H8 X1 n8 F2 o1 L/ i\[( S% J6 \( f' a" H+ Q
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1. n! N, T( b0 N0 R2 A9 O1 w
\]5 P0 {% O; m: V$ {' a5 m# l' n" T
其中:! Q+ o2 n" u6 i& k) M' k" Q
- \(X'\) 是归一化后的值。* ^1 U' q! C3 @, ?# ^0 [7 C; ^2 L
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。5 D( |# q" B6 I, O8 F& l' Z( W

+ m  I" P7 L% |6 V#### 归一化的特点
- R! T- Z% s. o8 l' y" M, f/ V; u' y9 s6 @: I
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。% r0 g* c7 G  D( G
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
4 l; e! p8 k7 j4 H- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
' x1 \. c- P# t- z" }( G8 t9 N6 M/ p$ u( H% x
### 3. 标准化与归一化的区别( a9 x, O5 W$ A1 w: ~

. k% D" h& n2 u| 特征          | 标准化                      | 归一化                      |
- g. g; i# u: D: o# n  |5 p0 F|---------------|-----------------------------|-----------------------------|
5 a* G0 g6 L( u$ y| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |' {4 R* Y6 G3 ~% k% F7 K" d" R
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
1 C/ O1 j( Q+ @$ w| 对异常值敏感  | 是                          | 是                          |
1 k' H2 @+ v4 s- y5 f6 _; v7 n9 T3 }| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
# N0 r3 h% D7 [9 C1 [: N
0 T2 y+ b3 P8 l! R& V. d### 4. 在时间序列中的应用
. n9 x9 l/ R2 Z% f9 T% l- a( m- m& \$ G# f0 |' Y6 B
在时间序列分析中,标准化和归一化可以用于以下几个方面:: e: j) f" T2 B& b
# l" u6 Q2 {2 J- y4 b, G
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。8 R* i" g# j; U' b# a5 k
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。/ V1 T  k5 _8 Q" R" C, Q  p& A- ]
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
$ G8 \1 v2 Z: I) c  y0 c
. T1 m8 l- C- j2 P6 M/ D; J- x8 K& X2 X### 总结
$ d. E  ]) v; m- c* G$ M/ u/ z
) W! z. S5 E: i, @标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。9 I9 S/ D& z" i" `
* z9 ~6 m& Y) `; l/ w- E

1 W& m3 ~1 W* u
, H2 r, j6 k2 M2 l1 Q) K: P

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-4-13 08:33 , Processed in 0.924585 second(s), 55 queries .

回顶部