QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1954|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1189

主题

4

听众

2934

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。2 z( R8 L3 V' E& n5 J' K/ ]7 a, g
5 C# a" i7 u! M- Y" ~
### 1. 标准化(Standardization)
# ?! r) I1 E# T$ N/ l  E, H1 p3 q7 \$ t
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
/ W8 ~; X$ J# f; P3 Q+ a) C: p4 ]1 T; r  N7 }* ~2 N; ~
#### 标准化的公式
: ~) @: J5 M+ x  A2 _5 y+ b# L# _0 Z7 X& M2 ~2 B: `, X3 y
对于一个数据集 \(X\),其标准化的公式为:* N4 J2 T" e/ |# _9 m# L
\[, ^8 N# d% W8 ?% M0 ~6 J$ t
Z = \frac{X - \mu}{\sigma}1 {+ {" v7 v  h$ N1 z( G% [
\]1 V2 Z  J* N+ [" b& C7 }7 E
其中:* d8 f9 a) c) B& R: [
- \(Z\) 是标准化后的值。
6 n5 R3 m! z. [2 @- \(X\) 是原始数据值。
- W7 Y9 y: b. ?. I, R0 y- \(\mu\) 是数据的均值。" Y" `& ^2 [" m3 y% f
- \(\sigma\) 是数据的标准差。; M! U  n) l8 U5 T7 Y6 ~+ [$ \

6 c# d2 c) b+ h3 ^; B! r$ L#### 标准化的特点
7 k* H; }! r3 T0 O1 f8 `( [- F& n* b
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。, i: D  k- G: n' _
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
( W/ _5 m8 M$ _9 y6 v9 ^- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。' C$ Z/ e3 \# P

  {. m. [& J( H7 F8 c) [$ a- Z### 2. 归一化(Normalization)1 \) ^5 o$ o$ e8 [

8 j, Z8 s0 m* |3 Y归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
& i/ U2 m2 I% I( J' S3 Z. `4 p( ~/ s* B
#### 归一化的公式6 E+ |, D' q; x0 s. b. }

  I& E& c% M9 T! W对于一个数据集 \(X\),其归一化的公式为:0 n! }. `5 g  ^0 \+ Q% g) h3 G
\[! F3 G+ ?/ h" m4 j/ a# F( [' D
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}5 b6 X4 l- h8 W: C
\]
1 S! _: Y; t+ D6 \8 Q, O或者对于[-1, 1]范围的归一化:
+ S- e7 N3 K0 \6 K% c\[; c' I  z! n. b) b: s0 t
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1, \( M6 i; ]- z7 U
\]( O( n! S* R. O& X# M* _( ]
其中:
0 r: h; o, a) L5 f8 ?  p- \(X'\) 是归一化后的值。2 Y0 [9 V( E+ ^4 u( F; x
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
1 i7 Z2 ~! Y) ~4 T1 t
1 A+ B# b2 u$ B#### 归一化的特点( g6 c4 L0 o7 v0 a8 K# ?0 b) R* {
3 l- J0 p, ^! V. v, u, H
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。/ b/ q: H! b& L# w" \. I# I- J3 s
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
/ s5 r/ T' s  ]7 v- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
' O5 m' X# x( R- `5 G5 X! c3 _7 r. o8 L/ K) P
### 3. 标准化与归一化的区别) V2 s2 \4 s$ Z) P6 z9 `3 t
& O; u/ |+ `1 w6 \' s
| 特征          | 标准化                      | 归一化                      |
, u1 F" B$ h2 F! {8 }$ N. o" q  U|---------------|-----------------------------|-----------------------------|
# |5 w1 X" d! [$ S+ K| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
2 `6 L6 X4 P, U' C/ ^| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
. i) K$ n4 e, S' L' J- v7 {7 i| 对异常值敏感  | 是                          | 是                          |2 U9 [4 s, ]! ]$ q7 b
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |1 ~/ @$ ?; v  P9 v* p

- u" y; C  R1 z) A### 4. 在时间序列中的应用
4 u3 S. `& ?6 y3 s9 S5 a
/ t* ?6 o5 _! ]* ]" {在时间序列分析中,标准化和归一化可以用于以下几个方面:2 y. a- @6 j- ^" Y- F* \

/ k* q; [: S2 [' U5 S- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
0 `) j8 ?8 a$ ]  W) I- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。+ [0 p  a* f) e) q; D9 U3 c$ u3 ~3 Z; a- O6 ~
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
' A, {) y) r& O+ P0 @6 ]* Q
8 ^8 S1 X8 T3 G! @### 总结9 K7 g! u; H3 H1 \
7 K- q/ L/ r! q+ e. E2 N  k# z
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
5 A% Y/ R+ m$ }1 x" T6 t: x$ n9 N6 C3 O( M

1 l, G1 F) \( J8 Y4 B
" |/ ^" k7 D" j: k) W  }

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-8-5 18:27 , Processed in 0.398053 second(s), 55 queries .

回顶部