QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1076|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1175

主题

4

听众

2828

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
5 }/ \4 z" d* j& {- u! a
. U. _) {/ S7 K3 A! X) a### 1. 标准化(Standardization)
+ m: A6 }' H/ |. m+ l
$ x. A& w$ l: V0 J标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。( H8 B7 B7 _$ `( B
  |; R- m5 x/ n
#### 标准化的公式4 P% k: d: X: C$ @
) D5 u# H; O* L' T# f: h2 q
对于一个数据集 \(X\),其标准化的公式为:
8 |+ y. v9 G% q\[
6 ^: k5 _: j  a$ C% k9 d7 a' M# iZ = \frac{X - \mu}{\sigma}
' d5 x' h2 d& m' K1 o3 v' |8 T4 L\]1 s& J' p& T8 |; t+ X6 k  N
其中:. o; B: q+ q4 S  g- E
- \(Z\) 是标准化后的值。( o3 {) m' g. F9 l/ t1 R
- \(X\) 是原始数据值。
/ l6 }" W0 O9 r& O- \(\mu\) 是数据的均值。
1 }; E8 T' d4 K9 O- \(\sigma\) 是数据的标准差。& t2 L$ d4 u( Y1 f5 Q
' ~' `; z# l$ J+ r$ @
#### 标准化的特点
! M, W% B' j( r- P# N, s4 Q* H7 m' Q& u- e* e4 j; t0 ]# z: l# L# I
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
9 t# a- c  R2 v* f3 @- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
1 z+ {5 C: h3 A0 R& c/ x- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。8 @+ r5 |9 {7 j" G. f+ x

1 ~  Q/ l. v$ [9 S7 n3 b### 2. 归一化(Normalization)( _) N6 c' V! `
9 z& _- E) o; Q! S! y
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。) w( j  F1 p' R5 q* Q( A  F
7 D8 z+ [( I9 ?7 ?; G% D- M! h
#### 归一化的公式
4 S" |4 i+ y, `/ `1 @( |& x7 V2 e' I$ ?( A" w3 P$ K- G( {
对于一个数据集 \(X\),其归一化的公式为:0 n+ m& Q" O0 ]
\[- x/ A9 \- T) _2 I2 X% `
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}& a# u' X! b9 q: K9 y2 H
\]
6 J0 S  S2 }- M  {( d# R或者对于[-1, 1]范围的归一化:
3 S9 e. z5 h# O, F! ~+ j# s  N\[
  u5 t( x7 Y  V0 t- Y8 FX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
, n9 u5 B7 p$ q7 p9 l/ O, Z\]
' H$ w$ c/ ~9 g* M% H) V6 E) e其中:/ F( h1 j5 f  g  z
- \(X'\) 是归一化后的值。# D: e8 \7 u! s* D) N3 a/ S
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
1 {6 y; S! D3 t% {3 [& h3 U2 \6 t1 i* o
#### 归一化的特点
1 X( a5 d! Z5 }+ h( t! p8 l! R+ D! O1 V' m3 ~3 ?, V  q2 o1 t
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
2 g) }% h, Q. B* ~. Q, Z  Y! N  M' \7 {- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
7 M; ?# ^; j: Y- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。. g* v2 q6 b$ k6 X0 W

) J( `2 y- C- M. w### 3. 标准化与归一化的区别% r0 R  b, G( ?! D- {" v  x
  h8 D# W, O5 L, L/ o
| 特征          | 标准化                      | 归一化                      |
/ J( x( t4 I4 J( v. C|---------------|-----------------------------|-----------------------------|
/ P1 q+ r4 H- A& \8 q| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
0 L4 [+ s: I. K- O| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
9 f; |# l; O# P| 对异常值敏感  | 是                          | 是                          |* }1 N6 k3 H% e  P9 j. x+ i
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
6 h& d9 o) R9 V# R4 P
) H3 B5 W7 i: x' p### 4. 在时间序列中的应用
- H# F8 Z, f( O
% E$ s- p% y; D+ j, C在时间序列分析中,标准化和归一化可以用于以下几个方面:- G, O0 p% y- ^+ T
, d0 r' V9 @' h! \! }9 p
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。; g  y6 `0 P3 h5 ]7 n
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
1 D* ]" H) }5 Y+ e& Y1 ]! F- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。: m4 Z$ l% b) a1 o  g. s

) S; E' y4 W1 S- ?9 b### 总结
7 Y( G+ F+ z0 x
: Y" z% Z8 s9 k0 S标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。; T4 R3 b- J3 s# R3 _, O

3 ]2 E( k5 u) \  T5 J' u& H; W4 u! K  G9 \, U

" q1 J, J* T: r) X

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-7-24 17:47 , Processed in 0.471630 second(s), 54 queries .

回顶部