QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1841|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1186

主题

4

听众

2923

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。3 @% f$ a; J* G, C

8 t; s- o) M: q8 r' o### 1. 标准化(Standardization)
. T2 Y* B( e0 t: R* k4 |* j8 W4 W3 B7 \' M# `$ R3 R
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
/ k& f( p4 N3 e' S2 Z$ |( d& I  L9 I& w
#### 标准化的公式: V) r' E$ t  o$ {% R
6 ]* m0 Y8 E4 Y+ o4 V$ q
对于一个数据集 \(X\),其标准化的公式为:& ^0 `: r/ G* J5 f7 r, I7 h0 G
\[% D1 p4 Q% N& x% ^+ @
Z = \frac{X - \mu}{\sigma}9 {1 s, o. b& _" X  k
\]
0 `& _  W( j6 b' |3 Z4 K其中:+ @/ g) ^6 U/ |7 r1 ^
- \(Z\) 是标准化后的值。9 \0 z2 @# m& D0 f& ]
- \(X\) 是原始数据值。6 E+ y9 z( }# g3 Z' r. Y0 y4 g$ o
- \(\mu\) 是数据的均值。
/ D0 }  a6 A$ J- \(\sigma\) 是数据的标准差。6 q6 n' E. O' u* T9 J1 o

8 U& ?; P; L) a- D: H. ^  U+ ]#### 标准化的特点
# m  N4 z  u( O: K; f
& d2 P% _- L+ ~) W: S6 h8 Y4 c7 k- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。5 B% T' ]: i/ x5 c  G3 \; _0 s. |
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。/ z+ M+ f" V% j$ j, U
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。$ ~3 L1 c; P" A' J0 p
9 z! V: }7 @7 {( d! r
### 2. 归一化(Normalization)
$ N3 u# }* o- u% A- Z/ L+ k1 e# e0 @" {- q" ]+ @2 b9 k2 e6 r& Z
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。5 q% }" z' }/ K4 B7 a. V
$ w$ L6 Z; \4 B; a
#### 归一化的公式
9 S$ f$ e7 v0 o
( Y! p5 ~$ f! U1 e8 {- r; y对于一个数据集 \(X\),其归一化的公式为:+ i) [% t! c- I. k8 O; E/ z* o% `
\[
& f3 v, D# l+ P! c7 N1 |) |0 VX' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}7 l1 Y5 ~: D( o0 Z0 k8 b1 e8 g
\]
& c& {5 P1 Y9 W" Y! ]# n或者对于[-1, 1]范围的归一化:8 P1 S& }0 i, k$ f
\[
" m# V1 t- M$ \# V" \3 w% H8 uX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1* O9 X$ t: c! c  d' a
\]
  Y9 |7 t. @3 I1 n+ R其中:
, M# n3 }5 G% ?  Z* V, o5 k- \(X'\) 是归一化后的值。
* r. V9 m) [- U- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
$ q# M  @# Z, l: E: c( i8 n, _. n
% V+ ?% r, s  Q+ _" T#### 归一化的特点% S& X, J8 ]. D" a- ]! F

, C9 m/ k+ l9 O! z( N- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
) f/ t3 S1 Z0 v% E% n' }/ m( l- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
/ n# M* g1 d$ {1 t' ~  j( Y1 \- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
$ f6 \9 }. e- ^% h6 e( M" R$ {6 H
### 3. 标准化与归一化的区别/ u/ d/ [6 H  E1 i! ~* I* A
$ f) H& C! y+ I6 a$ j
| 特征          | 标准化                      | 归一化                      |, o$ Z( ^  H% ^$ |7 R1 M( s$ q( p7 B
|---------------|-----------------------------|-----------------------------|
6 ], E% n) u5 m4 F1 o' C0 [, S: C' h| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |" b2 g. E0 u$ I
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |# E9 I. b. A: w8 X3 j6 u
| 对异常值敏感  | 是                          | 是                          |) [; I. G9 e, C' n, H
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |0 o, p* J) ]3 @
& Y9 x% c1 ]! \# q0 H1 S% ^4 e# Y
### 4. 在时间序列中的应用  f5 @5 H( o2 N
1 x9 E/ O0 F9 v: Z3 {* b' J+ D$ n$ E
在时间序列分析中,标准化和归一化可以用于以下几个方面:
) X3 `( f  |9 S* k3 q0 ?+ o7 ]) r& ?) a3 |! A4 g
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。3 H+ W1 F# V9 ?! B  n1 v
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。$ ]/ q% H, h6 _5 B
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。2 D# J0 G* C5 l6 F

5 }7 H  V7 K% B/ e4 Q$ ]9 `### 总结# f$ z# L( L, z. q% J
9 ]% D4 Y. l( w$ j
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
" D" K0 B# Z  y$ |4 c9 [
* \8 q5 W3 U  I( p
' K4 p: x. T1 F# M1 |3 c
5 {4 n) [" R+ d( x: V. j3 u

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-4-21 01:46 , Processed in 1.483843 second(s), 55 queries .

回顶部