QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 2036|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1198

主题

4

听众

2978

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。# B4 q0 ~1 i8 y/ f, G( ~; P

  `) e; x; \- w& C### 1. 标准化(Standardization)' H$ ~9 [6 }7 {0 |

9 k# @, Y: q( w标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
) Z$ Z8 a  ]$ [7 o0 m' |9 n" k4 ?0 }: h  \
#### 标准化的公式9 \/ {( @2 N+ m+ Y& _
: Y' H, ~* M% g" H- z% h4 }
对于一个数据集 \(X\),其标准化的公式为:
) ^/ Z5 y; S; j. `. R\[7 M1 O# b& ~  c& N
Z = \frac{X - \mu}{\sigma}
0 d/ [' H5 Y4 z7 w# J\]
: P" c) T; \( K. Y2 {# V其中:- x& o7 ?. v( x9 g$ `' Y/ S
- \(Z\) 是标准化后的值。+ @5 ^$ m$ i3 @, Z
- \(X\) 是原始数据值。
  D1 u9 _$ f. e* M, S6 \8 w6 B; l- \(\mu\) 是数据的均值。. \. r+ |! x1 Y" k
- \(\sigma\) 是数据的标准差。1 ?% P4 q/ _  h! v
3 [* h( |7 I; K  e8 r/ m
#### 标准化的特点
. z! i) z3 v7 Z+ \0 q) ^
% d: w# i% h" w4 B6 p; M- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。! L1 B8 \' G# R' w$ L
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。7 P, D( y! Q  z! u
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。' A' ]. H$ J8 {; F

: g; r! V2 o; P### 2. 归一化(Normalization)6 V2 f; |* D- ^8 `' Q& m

  n3 J8 L7 z( F1 ^7 t& W/ Y1 `, ]2 \归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
$ K5 K! U# c+ q
: p$ h  ?5 S1 o+ o#### 归一化的公式$ V1 k2 F. H$ p4 O, i* D1 H! ?) w

4 N& m- w! i. A: H) g对于一个数据集 \(X\),其归一化的公式为:5 `' F4 n* N# i8 \& W) ]
\[
# z! ]9 M* }. s$ d6 F6 r  P, m' SX' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}
) n0 d( t+ q0 f% p6 k\]
, N+ A, m  B" X: s4 w或者对于[-1, 1]范围的归一化:
+ X4 Q1 |0 G  l+ |\[5 `3 K. M8 `3 Q( U! T) Z% m
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
! e3 E% j; i& o: }, m\]1 x) J  S2 L: k; m3 G, G( u; F9 p
其中:
" O  L; v* T$ _/ y9 E+ M5 K7 f  o, D- \(X'\) 是归一化后的值。9 x6 ^) t; e* L0 c
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
, c0 E, r; L$ _, k- S. n( r- d4 m/ a4 V
#### 归一化的特点
& Y. I; W' M# }1 L2 }7 z. Q8 f
6 @; w9 @8 |2 q% ~% [5 `' i: B. u- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
8 n' `6 U( u5 V# f1 m3 f- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
7 b' j; M7 F3 w3 Z4 O/ u- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
( |" N. w$ U. C2 \- ~9 ^* h5 z8 d2 M$ b6 ?8 [
### 3. 标准化与归一化的区别
% F7 P2 Y2 K; M
3 V* I3 Q5 ]4 G( L) _| 特征          | 标准化                      | 归一化                      |
5 ~5 W$ f# i* s5 T; y" @0 l) r|---------------|-----------------------------|-----------------------------|/ f0 ]% X- Z0 j4 I
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
. y( [' s: C  f& j* b, ?| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |3 |  Y7 i& g3 h1 ?
| 对异常值敏感  | 是                          | 是                          |
, e4 Z  B4 H% i9 n7 P1 t| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
9 V+ E  d& R0 Q4 X. p) Y
3 u# ?# R, D$ c; w2 l; k% b### 4. 在时间序列中的应用
. B. j$ q% X& Z5 X  W6 l1 B8 C  s" U- o+ I9 X
在时间序列分析中,标准化和归一化可以用于以下几个方面:; W! A  q4 L* M

3 @4 B' o! N/ k- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
6 h+ I5 G0 h, r& l- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。+ X  k5 f# T! U: N
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。. y. A7 @) t. Z! K+ _5 I- f
  [8 b/ M4 r3 k5 O
### 总结  L% }" A2 I8 Z# J$ c

1 h, _; z2 Y/ i% p4 \标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。& S$ G0 W7 ^$ k+ c. B
4 K6 y0 E% M  u% `5 \5 N9 ]

6 D" s* V! X6 I% u/ K7 ~5 j: J! ]) c7 e7 u  U* h+ r: S2 ~9 }9 E

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-10-11 06:53 , Processed in 0.300874 second(s), 55 queries .

回顶部