QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1199|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1175

主题

4

听众

2866

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
" [' W7 C- O; N- v* q2 P; G1 P6 ]2 [" y' R
### 1. 标准化(Standardization)* [( f% [, L, l% o
1 C: D5 t9 y3 z2 N( ]
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
+ c4 X) r; y# J( }8 v
9 {! x# X* C: D' B5 h#### 标准化的公式4 t9 j% ~3 b- j' {/ ]

* q8 o' ^- v2 X) e对于一个数据集 \(X\),其标准化的公式为:( j8 q2 A' r8 Z# \0 E( j; D3 g" ]
\[
, e& v& e) M; J% R' mZ = \frac{X - \mu}{\sigma}: W+ s5 k! ^7 H, g& D  a5 J
\]
7 S6 `0 Y/ p$ z+ ]其中:
$ S- }$ f# ^+ O) k- \(Z\) 是标准化后的值。
  g/ T3 y! d& C+ [6 C  ^, F- \(X\) 是原始数据值。8 [& M4 l! Z1 U$ s- {- j
- \(\mu\) 是数据的均值。
' _7 g' p& q0 u2 ?6 w  I- \(\sigma\) 是数据的标准差。+ P8 W7 t( t: F9 `# z9 j

/ D, m% ]' C1 _3 y#### 标准化的特点
2 R0 m2 I2 z. c
! [6 R" L5 R" k$ k# @- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。# _5 l1 o. Z" {2 {- p. w& b) b
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。5 @6 ^& Z' j0 \2 U- r" q
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。! N0 F$ b4 m  |2 L+ [' v' r
" j/ T8 o) @" J6 F6 f
### 2. 归一化(Normalization)" O6 ^6 L8 Q) {( y) ^# Y0 f* f

% i: E) g, _* ?# I7 k' o5 ?* p7 \0 i0 H归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
2 w, C% [  v. h; b, N3 {* W! m5 l8 h5 M2 D/ K$ ^' r
#### 归一化的公式
) \. ?8 A, B( z& z0 x6 S, J* Q/ F2 N( B/ B$ Y1 k; R5 S
对于一个数据集 \(X\),其归一化的公式为:0 p$ {; M  ~! h( d7 E
\[& b! n- x! t! x& s5 t- N0 ]* M! W
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}# d0 `& M% G0 p; ?% t
\]
: d5 w! h6 V, ~( h8 n或者对于[-1, 1]范围的归一化:
9 x* u* Y5 z5 Q# A/ T\[1 Q0 K3 F* j8 V3 F. ^' E
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 18 a: f) r9 c2 b5 ~  d; Q
\]1 b6 A, k& z" R! }
其中:  O: u! m% M) D3 ]
- \(X'\) 是归一化后的值。, Q% C9 D! z0 R7 N, \: c
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。- v5 v" L' @# i: d9 I' m- b
( q1 L9 J& e+ \6 z' ~
#### 归一化的特点7 s' T% [2 K! R4 ~6 j+ s, k  X

' [1 t, D" z' t, P4 T( w- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
# y+ i5 o& {8 ]: [- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
0 q" h- {( ]/ r5 v- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
. W* u: |4 c  x' V( @
, `- u6 A6 H# H### 3. 标准化与归一化的区别& I0 {6 N' R6 q% R" f
) Z$ S0 P4 b: o2 B7 \
| 特征          | 标准化                      | 归一化                      |
7 O( I: ~. r' f|---------------|-----------------------------|-----------------------------|6 U. ]8 A' |$ U- \  N4 i' ^# j
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |/ R9 n- P! F) Q, _$ \
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
" K# _; _$ [3 k6 r% `$ ^+ C0 Q| 对异常值敏感  | 是                          | 是                          |
- M6 y% N: f4 n3 t- b9 O4 n: d( r% M3 ^| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
4 f, K& T: l8 W7 G. Z) N. O' s/ L; j
### 4. 在时间序列中的应用0 t: R/ q9 C( _: {  P2 |
6 S/ m: ~7 L' f3 L& g% D
在时间序列分析中,标准化和归一化可以用于以下几个方面:
* [' @7 f8 A  x0 x( e4 E( b- ~
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。7 {0 w3 Y' R* ]5 W  q; g
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。! n2 z5 |9 Z8 V* |8 e
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
  k) ^% \/ E' w: Q# V: F  T, @* J4 S0 c
### 总结
" e& A4 _# H+ y0 n' ?5 M
# Z7 B, ?& `+ }; A标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。2 j& Q/ E0 q6 Z. U/ h& @
, E! M& x* Q1 T$ D& a

% f5 w' T2 b: b' b1 Z  N" `$ _' N+ t# k% _6 \# Q

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-8-17 02:16 , Processed in 0.557392 second(s), 54 queries .

回顶部