QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1909|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1189

主题

4

听众

2934

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
5 w* i6 j$ B& Y( p" T9 f
# X# I2 m1 N8 t+ E### 1. 标准化(Standardization)
9 d9 V1 S7 E# n8 u4 B6 A2 O8 ~" I* T. Q: Q5 r+ L
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
  S0 S$ K" F% ?+ j% N0 {& H8 x2 b. l& p4 R; f
#### 标准化的公式0 C5 L: l) G. r
% {# H* U3 N) t6 g  w
对于一个数据集 \(X\),其标准化的公式为:
* M7 d$ E  p# p2 e- }' [, `" Y\[
+ s5 Y8 r% t7 P  Q7 u( @0 |* sZ = \frac{X - \mu}{\sigma}* q+ w1 t& z6 ~" y! M
\]+ e  t! G8 `/ z
其中:$ Z3 P3 g9 }; i$ W7 a
- \(Z\) 是标准化后的值。
5 l( \  s, c6 q9 }- \(X\) 是原始数据值。" D4 X0 g, n% H# b9 g
- \(\mu\) 是数据的均值。" I8 j' S# ~) w0 |
- \(\sigma\) 是数据的标准差。  `2 \' T7 {9 t4 O0 U5 r# P

- U2 W  Q' d! Z2 H* s#### 标准化的特点$ q1 }5 j- Q- W: S
5 M" ]1 K* R+ |3 W' k
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
1 D, z4 N7 y9 n- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
. f8 z1 Q2 s3 s) R- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
* z0 D: \( d* E& P( U* a+ [- M7 G9 }6 p1 C8 A! ^
### 2. 归一化(Normalization)7 d8 T; M( U1 P4 J" D

& j, C0 k1 }; `4 k. k( S- _8 ]) s归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
% e' `3 U! [3 `) `# v
, g" m+ Q) M- B8 C#### 归一化的公式! c1 v( d6 n# z9 I/ o  Q6 z0 i/ u
7 R0 N$ q# d1 f% F/ ?9 t7 Q* ?, C, k& ]
对于一个数据集 \(X\),其归一化的公式为:! p5 D1 Y5 t4 z
\[# c! \/ p! A% e- y
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}4 |! O* R- E+ P( Q0 x5 v; w/ Z
\]* D5 f/ r/ c8 [+ h+ c& C
或者对于[-1, 1]范围的归一化:
; U7 }& n2 [/ [+ F" A- \% U\[6 C7 S  t4 \: n4 K5 `
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 15 z% ]' s4 P- T
\]/ X3 C9 V6 W5 b
其中:
# W  X5 J/ J6 i- \(X'\) 是归一化后的值。
2 r* O: k0 l/ x9 k! S- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
$ Y; {/ l8 M% R* i+ U% I! A4 |( ~" y! G+ i
#### 归一化的特点
- Z+ ?6 h- t! L( U
5 F9 N* H! `& I2 Y' o. B% p0 }- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
) A- ?% y6 b5 I' a8 r$ s' b; l. _- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。% r9 |0 f" U, W- W
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。: o/ h7 a9 r& T8 u& [6 P
) l: d& n: y' F7 K& Y" x- I
### 3. 标准化与归一化的区别
/ b3 Y/ Q; z. l) [8 ^) T
" p4 r  z% V; N! w7 {| 特征          | 标准化                      | 归一化                      |3 G/ S5 m, ~) D2 p# Q' G
|---------------|-----------------------------|-----------------------------|
, y8 o: E( x3 q( G| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |' k2 k! b3 a; `% {$ Q3 s) w* {
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |) F2 F1 Q2 e, F0 o  g9 c/ m
| 对异常值敏感  | 是                          | 是                          |
! ^- S( R. v* ^) ?( e' `/ o: k8 E  A) N| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
6 w" J0 ^' w" B% E
- {3 @6 I  @4 K+ N### 4. 在时间序列中的应用
4 B, e5 h* o$ M& S- b3 f) p- r4 f" Y! i8 T6 J. h
在时间序列分析中,标准化和归一化可以用于以下几个方面:
0 C" h3 E" L1 D  x
5 f' M% B, e) g- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
5 L, j. t4 R- W9 J+ T7 }- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。( D/ H' `) }- _
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
+ M' u/ o. y: P+ I1 J- ]( F8 |4 K4 S8 Z; ^
### 总结
+ `  ^" c. C8 R+ t: o' J
; L: N1 J# J0 p( q% g; _0 }标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。5 t$ q8 _9 t7 p0 Z/ a
/ I1 ^# y3 f; M: }* h; g
" m' g/ p6 S. |
4 ?" I; f% w2 p$ G" f

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-6-20 04:27 , Processed in 0.458238 second(s), 55 queries .

回顶部