QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1930|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1189

主题

4

听众

2934

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
' v) y! Q; k' J) j! Z1 \; w. H. x! Q! _; v& H1 z1 T
### 1. 标准化(Standardization)  C$ l7 \; i' f/ l% z3 _

: k+ o$ j% Z: B. ~7 P" `, J标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。# G- }+ d/ }7 x

3 q" j9 _/ [( ]/ R4 ?#### 标准化的公式
2 f( v$ T* {1 V- v- Z$ P, x0 D/ A5 x( g- [& t* C/ t8 O- s; t
对于一个数据集 \(X\),其标准化的公式为:  h) y7 `2 k# o# o* D
\[* O7 M0 r$ J8 M4 ?3 I
Z = \frac{X - \mu}{\sigma}2 X% ]  b- j3 x
\]
8 s+ l% D, a7 f5 u/ C其中:
1 W  `2 \6 F, d( H2 _: R- \(Z\) 是标准化后的值。
1 i& A0 J4 G8 v" T  O* y! H- \(X\) 是原始数据值。$ T% G: @- z# K' b' e) C8 K
- \(\mu\) 是数据的均值。
: w# Q& o3 _* P% q- \(\sigma\) 是数据的标准差。
; z! b. b! V- M
( b6 D2 M$ [0 S. l+ k#### 标准化的特点+ m; z- P  X6 Q% e4 U: b8 v6 x3 x
( Z/ a+ n; v6 d. I
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。" |5 J6 C8 N1 n4 S7 B
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
: W+ T% ~* b. V; b- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
- I6 ^. v, n: ~. j- q, s
3 p& V2 ]+ A6 L9 Y### 2. 归一化(Normalization)$ b# u. n$ a. m7 P# `. a
& T- _+ ]0 W7 i
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
+ e3 `, g/ L0 _* i
# }1 m' C% H* l! j3 Q#### 归一化的公式
- P0 q+ _% ^. W$ ]1 f  n0 |: a
/ B8 c. _/ N% U8 y+ n" S! U对于一个数据集 \(X\),其归一化的公式为:1 V$ c( x4 r; O5 q; t' ?
\[: X- j5 B3 o- G
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}$ `- Y7 V4 r$ {) |
\]
9 y$ T, }. ~% M: x- D8 Q' u或者对于[-1, 1]范围的归一化:
+ f7 V9 E" I- B/ l4 m\[
7 O: _  d, M) u9 k6 s9 yX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
$ d: o, X) f1 e4 a\]
$ E6 Y# n5 |! X( V8 G) D0 I% m其中:
/ ^4 k; R+ s" U. n- \(X'\) 是归一化后的值。
9 [0 R$ H( Z* Y- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。8 E) o4 h' f; M& X$ y& H

& u9 j" S% y: s) o: k#### 归一化的特点; b5 Q  y% U. p* C, A

1 c3 j: b. `: A3 k6 l# F$ ]3 g- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
, _. E! b+ J1 r. J) @& |8 b- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。/ Z. @1 T9 u8 h+ t: r( F
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
7 T7 B1 ]& a2 g7 ]5 d
& [% q* D3 W0 O) j1 q0 j$ q" S, V0 D### 3. 标准化与归一化的区别$ ?- H+ t8 A0 M" }2 z! a  O9 v* u
+ Q7 w6 b) L" i) z
| 特征          | 标准化                      | 归一化                      |
0 f& b' H: ~( z! x|---------------|-----------------------------|-----------------------------|4 x: z' x' n9 N1 H
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |5 c0 T/ i9 M7 t1 M1 |
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
/ v* D. Z  q8 {' n9 h. E/ u# s+ A+ e| 对异常值敏感  | 是                          | 是                          |+ ^1 a  o7 Q  s+ D. M, I4 D+ G3 X
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |& {9 T9 L" {0 c* n- M

; e$ S/ ~4 G- h* z### 4. 在时间序列中的应用
1 }7 u# m, Y  r3 G+ `" Y& U/ l5 m* {; L$ s+ r5 o- g% p1 o4 X
在时间序列分析中,标准化和归一化可以用于以下几个方面:" j" p8 p1 W3 |. y
. I! @( a; W  T2 V$ R3 |
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。* j" Z' [( k. u3 h$ P4 C
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。! j( x/ @( t1 o- X6 E4 _* }4 D
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
# o! }. l/ e* g) d( h  P0 ]3 g; {0 A: k8 h; u& m5 H5 v
### 总结
+ v9 t  F' S# W% v0 v% c
$ D. Q- j" {/ H" H标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
8 b% T/ k% m3 R6 B9 w* p8 J3 s5 j( |7 q) j$ q5 @9 `& ~

" I8 M* v1 Y. `/ |
# ]: b* o9 n3 z/ T* ?6 ]! w

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-7-9 19:18 , Processed in 0.559882 second(s), 55 queries .

回顶部