QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1311|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1176

主题

4

听众

2884

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |正序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
; \1 Z( ~  D1 k' ~5 A
1 J1 m3 m. [( U' A: q. g5 d### 1. 标准化(Standardization)
" ]( x! _5 D5 r/ c6 {- o7 h  N7 v( `, k! h& y' ]/ V
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
2 _- L5 R3 S* d, M2 d) b
9 k; a6 N# I) }0 c; ~6 F+ O9 W/ r#### 标准化的公式6 L% v$ g0 q  k. M
4 K/ p0 |$ \4 ~4 E6 c9 x1 T+ P/ ]5 f
对于一个数据集 \(X\),其标准化的公式为:' h/ C0 D! {9 z) Q0 {: ?0 P! L
\[
: K8 k8 a- ]. r3 F7 {  i' QZ = \frac{X - \mu}{\sigma}
! [/ ?. l! |0 ?6 J  v" {7 I\]2 G; P$ f5 t, b# j8 Z2 V
其中:" y% L( ~* |$ _0 X- z! C6 U
- \(Z\) 是标准化后的值。* B7 r2 W4 r2 u1 p/ v. ~. |; m
- \(X\) 是原始数据值。. L# F5 x4 i# T- Z. I$ @
- \(\mu\) 是数据的均值。
" r" ], n, D1 `" @; H  f$ P$ Q- \(\sigma\) 是数据的标准差。
; Z$ r  O0 y  J/ U) X2 D! |0 L5 C, ], D% m% E
#### 标准化的特点0 Y  k  T/ P" c
- A; S+ W# o; O  T2 G) Q9 _
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。1 Y/ M2 P1 z8 j2 q( ^& f  j
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
8 |" |5 F: Z; g0 D* @$ V- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
" H/ j7 M/ G6 ]- l) w- F$ y# d6 x6 S
9 u* B4 F# w7 u4 e0 f/ Q) @- {% p### 2. 归一化(Normalization)$ A* B$ @  a: t* z+ V) l; n: b& N. @3 K
4 I$ x, a, y1 C& k
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
7 H1 q" e+ k  c: R
8 I( P$ P) G+ N#### 归一化的公式8 ~* x2 V1 I& O5 h9 Z9 D
. G( R% T' X, x3 g# o  K9 L
对于一个数据集 \(X\),其归一化的公式为:  ]2 S9 X( m8 F! K3 Y- `% b9 X3 B
\[8 ^0 Q6 a- Y- S0 x6 t! a
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}2 v; D5 r- d& o
\]7 Y3 L5 K$ i4 z  U2 E+ w& A( I
或者对于[-1, 1]范围的归一化:6 Y+ m! m( K  {
\[1 {$ l6 J+ V5 b6 u2 w
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
- g0 D/ F1 Y$ U0 }\]/ y9 c6 T( M& z2 B2 \" ^5 s$ g
其中:
: h0 b( Q: S1 v, w- \(X'\) 是归一化后的值。# d: @* i+ T+ K% y  k
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
2 q8 j5 _  P1 z4 S$ F7 I9 B
3 f5 h8 G) Y5 n& S6 G, A1 v4 N#### 归一化的特点; s2 [. q- ]2 ?& G6 X- s; K
5 Y6 ^6 g7 h+ K/ ?' ?% @
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。. ]: D* d: X9 x/ r1 H  x2 x
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
; f4 H$ i9 u0 ?0 a* C7 `- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
2 D, E3 D: d/ u, L. f8 |9 D, ~6 v  D* @# @0 ]1 b
### 3. 标准化与归一化的区别3 C, X. D# g: v" p  V# ^

# a- T; p- m7 i! k7 ~5 a| 特征          | 标准化                      | 归一化                      |
' k! V, q- t; t. s/ ?/ r$ u|---------------|-----------------------------|-----------------------------|# `. F+ g* m& W
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
$ n. ?! F% `% D( ]| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
  j; Q+ H8 ~" X3 r9 S) O| 对异常值敏感  | 是                          | 是                          |
9 k# w+ M5 j# y0 e$ N0 B+ o| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |  f: j0 y+ x4 M$ b/ {; P2 N' m
/ N& b; A5 T3 b! O
### 4. 在时间序列中的应用( B: [8 H5 {8 Y
4 \4 D1 y: d9 n6 w
在时间序列分析中,标准化和归一化可以用于以下几个方面:
( T2 S4 L0 _  u. w2 o3 U1 Y7 H) z% S( o' J/ S% X
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
5 F0 O- D2 H! @. {7 h- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。: B* ~2 g( T$ H0 i6 U7 k
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。% l2 j- B2 ]* |$ Y7 w4 H
) ~' v% t$ ^* c- t+ M
### 总结
) _$ F) ?5 R9 Z9 ~
' K& k; K# o2 b  V标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。9 k# `, x9 B- J- p5 X

( e+ ?7 x/ z' _; y0 ~
7 P, D. X$ R! ^& m3 O0 H
' P0 x1 l4 O, u8 |8 r& M

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-9-18 05:25 , Processed in 0.362916 second(s), 55 queries .

回顶部