QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1840|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1186

主题

4

听众

2923

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。* P  b! \- V; ]5 @5 ^

* V( K( o$ [4 ?+ l### 1. 标准化(Standardization)5 A7 `- p; q4 z0 H

# z  ^5 V/ e% ~% L+ f标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
  F  J6 ?: p: ]4 R& ?7 a5 p8 ^, {7 L, i0 L) i* n5 v* l5 O& ~) F
#### 标准化的公式
8 W% e8 Q" c& @6 n, H! C+ ^& ]
2 U6 S) v# o# G; t: h对于一个数据集 \(X\),其标准化的公式为:9 d# K' e0 `6 G6 t1 g, Z
\[  _/ r, P6 U; u: g
Z = \frac{X - \mu}{\sigma}5 w* e/ b; t* a5 M/ @8 z
\]( C% p& w% o  ?8 g3 j5 B
其中:# E) L! J; W0 \2 p1 e
- \(Z\) 是标准化后的值。0 t! P5 O, t# H/ b3 n- N/ ]2 [- m
- \(X\) 是原始数据值。
6 I: m" z2 L- O! j$ {- \(\mu\) 是数据的均值。  q1 `3 Q; K- d
- \(\sigma\) 是数据的标准差。8 }) }7 d" w# H: v  g

, R  r- z/ h/ d. H; ?9 e5 q#### 标准化的特点( `2 _$ ~0 X: R
' @3 r- A* b5 A# P# U% i
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。9 A  M7 P; G% K' [" a& S/ C
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
; X8 p  }; f3 v' r, a5 ^# o- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
0 I# V" x. @" v& Z* Q( F- C8 o' U9 g; f& l, J/ x: d: R* m' i
### 2. 归一化(Normalization)
8 f7 y" g8 v. p2 o
  s, p9 s2 @3 g7 f/ g' n4 F归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
6 I1 a! i  k* H  F8 ^  W) i
) Z. z9 g7 M/ C#### 归一化的公式8 @! x7 H7 ?9 K7 X- }8 u- @

2 }9 D/ E0 z( ~7 ^3 w* ?对于一个数据集 \(X\),其归一化的公式为:) j8 m+ o: R) {1 o" ^" b8 D
\[% b) |& m1 D3 F9 Z
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}/ Y9 W& N3 M- t  X  Q. v
\]
/ \  }% Y  S# T5 N) f0 F( q# }, p  J或者对于[-1, 1]范围的归一化:& v# |3 K) V7 Q! u! \$ J! {
\[
7 x* _  A, `$ w" |1 hX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
9 Z! j7 ]3 c6 p% L7 \\]
2 |! y" Z' n; d5 j8 ?" ^) ^& y其中:
5 p: ^( _1 r  U- A2 }- J- \(X'\) 是归一化后的值。! G- ]# @0 U& O, B
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
! O+ d; W* u. p. L+ b" I! n* f, a1 A
#### 归一化的特点7 E5 Y3 m8 e  N

3 r: J$ f8 y: x" m- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。$ a( \" L# K* c6 o& H/ s; e5 B8 W
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。$ a) n! B( H% K. q! t
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。5 O1 r% K' W" U% |0 o) \9 r$ g# G

2 k4 Q# l: S9 }. a### 3. 标准化与归一化的区别# n( ?& z, y/ F: t6 T
8 T$ I. _; ?# D
| 特征          | 标准化                      | 归一化                      |
5 k; a; J  _" j9 h+ H7 L|---------------|-----------------------------|-----------------------------|
) H# W& a" i) o" @5 A& b/ O| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |: u) S5 z4 u) R" L% ~$ D, b& I
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |5 _( Y7 r, P* ^. k3 n& X
| 对异常值敏感  | 是                          | 是                          |
6 w5 r- V2 j6 r6 T| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
$ p7 y% B! }; h% [( v- U5 G; Z7 R* |% c0 Q9 u6 c
### 4. 在时间序列中的应用& O) U& C& J- J) Y; L$ B" Y

# K, q5 K7 @/ G! O# P6 W& \% u在时间序列分析中,标准化和归一化可以用于以下几个方面:4 {1 _1 |; |- S- h1 J# J

' @+ W, i4 E+ w* I$ w" }* x* I5 ^- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。5 V/ _, E; E/ F1 I, G
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
$ o' g$ L3 Q2 x7 h! \3 W& {& \& U- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
+ C1 l0 S( J) d. S# ~& g/ s4 f1 j! q8 Z1 B. g$ I2 i  N$ W3 Y, a
### 总结
: ^3 d5 x. O5 V4 s5 g5 P7 Q
% s, _: }$ r5 m/ N1 d4 C/ \! t- ?标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
9 f4 R% s) @! s% O
- G* H$ G5 s2 j# b) g
) p( }3 u/ q$ {
3 P: u, m& R7 |& s6 m, `# g

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-4-20 11:03 , Processed in 0.423602 second(s), 55 queries .

回顶部