QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 2021|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1198

主题

4

听众

2977

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
- X  D6 G3 y. X7 [4 f: q2 C" t
% i& [( w! _5 r### 1. 标准化(Standardization)  h2 p3 Q( C3 ^4 V5 T2 g0 K; N

( U( [" {. U7 Y标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。" X& I* ~! U  o( f8 u! B+ Z, [
- _' W  @  S/ B( }, s. b
#### 标准化的公式
2 W. w1 h/ N! l! A. R7 g: B: s! W1 C% g' R# i
对于一个数据集 \(X\),其标准化的公式为:, m5 l  b" w& P0 F& ^+ X0 E
\[
. b/ t6 g& R( kZ = \frac{X - \mu}{\sigma}
2 {! I5 }: B: P% ?- z\]
0 H6 j5 V! s3 S; S4 n9 D0 Q其中:  e+ Q& }$ Y6 ?/ A. R, i8 J3 s
- \(Z\) 是标准化后的值。
3 _3 p1 y/ Q% l: j! v- \(X\) 是原始数据值。
+ v( w# N. e, w' e) B- \(\mu\) 是数据的均值。8 E, F" D: |! ]/ F; ~) U; ^& L& F
- \(\sigma\) 是数据的标准差。8 c$ H4 E' ~- z& X
' |- J0 L- U2 I# H+ Y0 E* i2 v
#### 标准化的特点  k1 g2 Y: v* f2 O+ {7 q- Q

7 A" u/ x. `3 P! f# l5 a- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
7 a. E* f: o. X9 B# H: `- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。; r/ T/ _; ?1 U: @  G
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。& R$ k2 v' j6 o2 h2 l" X
# C! J7 v( B8 p4 y  r2 s: k6 O
### 2. 归一化(Normalization)
# G+ l4 [( `; J) v3 l0 h, }* _) Q. X$ B
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。! _* q/ t- B0 o) H6 }
% ~3 Q9 d5 e% S7 v
#### 归一化的公式2 \; i) }! y3 C/ r3 q

8 M8 h2 @. L- g" C- c% }) j对于一个数据集 \(X\),其归一化的公式为:& Z; D  n0 X7 I9 D! _
\[. t2 H+ ~' N. Z
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}: {! B$ R  x9 P! G; ^# ?
\]) B2 r7 i5 O# Q# F
或者对于[-1, 1]范围的归一化:! _* K# S3 a* e/ o# D* o
\[
( D) p7 N" k$ A8 `' bX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1/ ^5 [# @+ f8 ]& x) M: D! S' w
\]
0 }/ n* N  @0 [5 z  l: J: j6 g# q) Z其中:; h0 y2 q# ~, _8 r0 b5 o3 R: F; K" _) K
- \(X'\) 是归一化后的值。5 Z6 q# t# U5 ~% I
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。7 c7 ^0 T5 O! n' i- x6 a$ ~

. v1 q/ ~' X9 C  ?0 p0 _2 q#### 归一化的特点! o6 a" O" B+ u4 w6 H

  |* b  z- l' p6 O! w8 q6 J4 J1 g- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
7 D# ^( w( g$ m& D; g7 T: }4 A+ y- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。- h- g. m; f; Y# S- }+ ?+ w
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
* a& {& w8 x. t  l! }  M2 [* g/ u/ a+ A0 h3 ?5 e( t$ j* k; L2 P( a
### 3. 标准化与归一化的区别
1 w1 f6 r2 G. ~+ D+ T
, }/ {4 H6 k; m8 E2 s" s| 特征          | 标准化                      | 归一化                      |- O- y' @" F! V4 X' L
|---------------|-----------------------------|-----------------------------|
5 ]) f; ]4 b0 K+ E| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
+ e7 X3 [: R( t: p| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |& m3 D& z* R9 H! y3 F6 E" {  y
| 对异常值敏感  | 是                          | 是                          |
! @5 z3 j0 [' |+ J2 A& b| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
* M  w1 M" t$ `$ ]9 W2 |
, d# d0 y$ m1 }  f% v3 C# m  \. V### 4. 在时间序列中的应用
5 d- a8 Y1 C1 Y. d' g* g' F& h" E3 y; ?& ~1 U! N
在时间序列分析中,标准化和归一化可以用于以下几个方面:
3 A9 W7 N# ]: P. `* v' h9 h8 w" i, Z
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
' v0 Q: F/ K" z/ F- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。9 U" B% F5 R+ W2 y: j& g: l
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
1 v- \2 e8 k+ m. V+ p5 L( ]5 j6 W
### 总结
- M7 r2 G9 @& f7 k- ]/ k0 O7 o+ L. \! _* u- E1 t* t
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
) ?3 F" m: R4 g3 ~& a+ D! X) J* V) N+ \3 u, X1 e, {

( m6 M4 p7 v, j, a. L% m9 ~5 [+ z5 z4 Y+ L4 ?2 [

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-10-2 10:36 , Processed in 1.329910 second(s), 55 queries .

回顶部