QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1906|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1189

主题

4

听众

2934

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
3 \, k; G! O# \4 |/ @3 L7 r* A
6 _9 u9 ]: g, Q  C# [2 w### 1. 标准化(Standardization); [2 W- o2 h  O6 h7 S# A" N  d: \9 E

8 |; {( W5 ~% f9 E标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
0 Z4 a0 D, B9 E: z- q% k  g7 y) X$ c2 {/ D7 i
#### 标准化的公式
; B. a, \: j/ `$ E9 }9 ~: A2 K, m* g+ C
对于一个数据集 \(X\),其标准化的公式为:, c6 b0 M% {0 B% o: o4 N
\[
; L+ }0 G3 {: m4 xZ = \frac{X - \mu}{\sigma}
  p$ }! K- v+ h3 ^1 J0 b/ I6 ~\]
. R# I5 H+ k; p. s: Z) C' `  m其中:* x6 y  I3 t2 |' R
- \(Z\) 是标准化后的值。8 {. z. N2 |  }9 b! X
- \(X\) 是原始数据值。% J( @7 L' t' _" s7 v: H
- \(\mu\) 是数据的均值。8 R; x3 j+ q1 y4 z% F8 _& R
- \(\sigma\) 是数据的标准差。
+ [& z- Q" e. S6 Z) J' U7 _3 S$ V" b' [7 M9 R( u. Z5 `
#### 标准化的特点
" z9 A: i. x: i  H: b3 f7 S1 V6 l' y' Q
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
7 I: ~; `& }: f" N- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。. e. @8 s2 k" v. H2 K
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
  D: r; @  s3 b* H! M
4 O3 P+ R8 d: v  j, p* ?  f5 c### 2. 归一化(Normalization)
( b  K9 i; n. S( _: C9 F: ~1 l9 O! y% }$ J6 s
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
- z7 y6 O$ p+ C. ?/ H; {( S9 m  {
3 j* H+ U# v( |2 n9 M#### 归一化的公式
  _9 C- ^4 |  q! ~1 C& z5 K9 V! s. k! z: C$ l
对于一个数据集 \(X\),其归一化的公式为:
; Q. g* }, F& {+ Z! n\[
5 j' k5 m" K$ F" PX' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}& ?8 F" [! L3 {: R! w; x% Z2 E* d! Q
\]  w/ C8 a/ v, G! o/ W
或者对于[-1, 1]范围的归一化:
  _, D& a! K* w; o% E\[8 ^9 e) O3 Q# I  r' S0 l, J
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1( Z. ]/ C" n9 J  }# ]# }
\]5 v' G3 o8 x; ^3 s, t6 e- u/ ]
其中:: S+ V+ ]* c, i1 |6 `" n" \
- \(X'\) 是归一化后的值。
  P6 [" z! M' I2 g" j$ G: V/ ^4 g- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。! ?. @' i9 ^9 j
" f  @0 L0 \" I, F  M, C/ i
#### 归一化的特点, a( @( O) |% d0 v4 I0 Y
$ C# g  b, e3 k
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。* G/ l, v! [8 ~" }
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
( P5 W; q' K, @& L/ r( l1 \/ f- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。9 P. J  E( ]& U* `
' C6 G7 E  d( G1 @3 L0 q
### 3. 标准化与归一化的区别
% j; |" d8 W! ]0 J4 j8 Q+ @: e7 Y; j5 g; s
| 特征          | 标准化                      | 归一化                      |
, h7 s7 I& o* e3 i|---------------|-----------------------------|-----------------------------|9 O# E9 [9 p/ Y2 D+ X- _/ G) L/ d
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
- B2 _. n1 b7 U9 y+ _| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
& W7 H& m+ X3 G! P* @| 对异常值敏感  | 是                          | 是                          |7 R. V, c2 l7 E8 M. l
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
1 y: ~, Y1 e4 H8 f4 \6 _! a" O( |
### 4. 在时间序列中的应用. ^) \& W( u- ]/ V  f# h, a
9 R" o" w3 x$ J
在时间序列分析中,标准化和归一化可以用于以下几个方面:) A* B# l+ d, p9 H

7 }+ n, W! j) n4 I6 T1 `2 s4 R- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
  B. I' r& a& W' j- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
' ]% m6 c' a' J% S7 D- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。& j+ H5 |& m) J' H
5 M% _4 U/ {0 ~2 M/ K/ F$ Y
### 总结; u7 |" f: Q. T( O; G* H

5 F. [4 x8 c* P. h0 i7 I+ P标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。  C( N0 ]2 }' X) h, |) F

  O7 {2 c6 u% K# l5 c9 N9 Q( j: a. Y0 Y2 o; C! L
: g5 w8 ]. c4 I, S9 B# P5 S

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-6-20 00:50 , Processed in 0.432447 second(s), 55 queries .

回顶部