QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1384|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1176

主题

4

听众

2887

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
  [: ~/ P3 B: R7 u! u8 o/ p. @8 D! ^8 |3 g7 a* m) v9 ^
### 1. 标准化(Standardization)
+ q) Q  [1 l' _' l4 g) a5 q% _7 t, t7 D2 G, s9 Y
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
9 e2 P, ]  R! v* V: D! x
, O+ \- i; Q- n9 B! [#### 标准化的公式
" j+ h, G* J4 j4 D3 X+ V$ C9 F. p1 x" l" V( C6 p3 F( n. O7 D
对于一个数据集 \(X\),其标准化的公式为:
( t- `; b  ~; I) d\[1 V5 A. x, A2 ]% \. I$ w) k
Z = \frac{X - \mu}{\sigma}( \5 Q$ p5 _( S+ Z; t' T& J
\]
1 R1 B9 {0 v! j" b- ^% j其中:2 l2 k. b( \2 ~( j# Z0 F
- \(Z\) 是标准化后的值。6 }: }. _6 w$ E9 K5 w
- \(X\) 是原始数据值。
" y, c6 \& N7 r2 w) v- \(\mu\) 是数据的均值。
; b" ~8 ~& [- b8 n$ b% H- \(\sigma\) 是数据的标准差。* I. P/ j# b4 j0 H5 D* h

3 m9 q: t7 ?% s8 l: ?0 N0 }# `#### 标准化的特点
, U# _4 ~9 V9 R" F5 |
  m, m% }# Q% r- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。& o! s5 g% G5 X* t
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。4 x5 i" j0 z: o
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
7 E8 ^4 S; z, [7 ]( U9 u$ \# k/ Y4 i9 @& o8 |
### 2. 归一化(Normalization)" D& O* j. K3 r" W& U; D
3 j: O. N( [* I8 k  w) r
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。. a# Z% J" N2 K# R6 B! ?: L
9 K" l8 j  Q, f* u: i4 ?; P, `
#### 归一化的公式
+ H0 B8 S4 M. @- e1 n3 N* z# u# R! }8 i, ?3 K$ c
对于一个数据集 \(X\),其归一化的公式为:6 p* g1 Z4 l$ a" v6 R1 g& G' Y! e
\[9 |8 O: |$ ~: r& p/ B+ L$ y( b
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}3 A2 w, Y/ \9 r& a% C
\]
2 ~% T/ }' Q0 j* z% N3 W" ?或者对于[-1, 1]范围的归一化:
! c3 h% d2 E0 f- z; z+ z\[/ X# k& j* [3 a' \5 O" s# g3 i
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1( z- j( }+ Q1 n& [6 K% Q
\]4 W- B9 t7 N  U( Y* }9 o8 E! n, t
其中:
. X: i% E7 ]4 Q0 K- \(X'\) 是归一化后的值。9 W. c# z" v6 L2 _1 h. b
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。# d' _2 A7 A  ]* X: g5 V" n

% S2 z/ }! \+ q. N$ l#### 归一化的特点
! T1 }+ D2 G; F+ {+ G* S, Q) F4 {9 p* p8 ?" W8 ^
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
- T) @6 J3 |  X  g! S- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
% v* [  I; [' t& @- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。# g0 {$ p2 b  f) R* t/ W( I, u

6 l. j. v9 s9 X8 ~" e; w### 3. 标准化与归一化的区别
! Q2 [1 w1 a* c
5 j; Q  Q5 _' ?3 g; ^" l$ G( P| 特征          | 标准化                      | 归一化                      |. i1 M, J; k: K" c: n" L
|---------------|-----------------------------|-----------------------------|0 X- I- D& _% y" |) _- l
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
* D& }( R* C3 p2 c9 R4 H1 w- A| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |3 x% S2 d7 I2 V" D  O
| 对异常值敏感  | 是                          | 是                          |+ c/ i7 D% [" v# P( i) X3 S
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |3 Y& d. q- t* |. \; c) n1 e
. V) M. K* i: I5 X7 n, G8 }* {
### 4. 在时间序列中的应用
, h2 c& E& K! v
/ F3 y* O, |5 Q) J  T在时间序列分析中,标准化和归一化可以用于以下几个方面:- W( S7 V9 x. X9 @8 j4 N3 R

7 \: B7 v) h3 T- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。, N# C% w1 N- Q8 J, I, j
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
$ u3 O" ~  }6 \6 P' }- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
8 d- n4 C' A! [, ^) j* s- o# \' u6 U5 ?$ J
### 总结
3 {- W$ }' Q" J3 Q8 p* y3 n+ B% G9 F2 S( |; l& Q
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。7 ]" S$ `; @6 n7 ~+ k  m  X. k
2 j, A4 O! _$ q8 s4 D* ]0 C

( Q2 M5 \1 N0 M% W
$ V  J& b8 v+ y! }4 M+ X, p

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-11-6 18:21 , Processed in 1.678077 second(s), 54 queries .

回顶部