QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1030|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1175

主题

4

听众

2817

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。7 z7 w/ n- P* V% ]$ }7 k

* V' c. p' q1 b  {1 m6 ]### 1. 标准化(Standardization)
$ w# d5 O" \, X9 ~+ B
) \- ]+ C5 E5 U+ i( }标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
( X! }8 Y! J( R8 B% m1 n$ H( _0 ~  T: H8 p9 j/ `
#### 标准化的公式4 z  b$ Z: ^" C( u, i' K' [

( L$ w: t  @/ K+ m8 b+ e' @对于一个数据集 \(X\),其标准化的公式为:
9 O2 Q/ ?* `) e* N\[
* K4 w9 B& A5 a$ d0 mZ = \frac{X - \mu}{\sigma}
, A3 O# X8 E8 R) B. \% R\]: H7 a- O0 i1 \2 e( E3 H
其中:" Q0 u4 _. g) }$ Z
- \(Z\) 是标准化后的值。; a& j! _% T+ x- A7 B( q- g3 J
- \(X\) 是原始数据值。: O4 p* T6 \! T0 q. A& Z5 U* I
- \(\mu\) 是数据的均值。
) Z) D4 y+ ^4 i% l' B7 T- \(\sigma\) 是数据的标准差。
% U: |) z' t4 b# z8 l0 A  _& C5 W% F" d# j
#### 标准化的特点
5 {' P( w, x* F( z: t! @# E- y  ~
( n& U3 {0 C$ Q9 r2 _3 H- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
% u6 t2 @! c( F+ z; t& X% b- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
( U% f6 T0 @, U5 R# J# V3 M- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。) D( v: Q5 y# Q) o' D( W5 h' \

: x; a$ \0 b; C9 u* R' Y" D### 2. 归一化(Normalization)- R, `* G* N$ |4 ^% p: c3 r

! |  F5 F" i+ x- E+ r3 D归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
4 g7 G  t2 x* T0 w( K* g! }# s
3 m' i' X. w) B* ~#### 归一化的公式4 c+ l# U' q' I7 l
/ X5 \7 {7 l: Z
对于一个数据集 \(X\),其归一化的公式为:2 ?$ _; \, z4 R( d. |6 o$ E' j
\[
% [" s+ r& O  m; ZX' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}
; i& @4 c8 U5 C) J\]' q, n) K3 T5 G9 T2 k
或者对于[-1, 1]范围的归一化:2 M0 N& B/ }! j# P
\[  @! c0 K1 \) ^# W8 a
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1( v9 f% K) h. b
\]$ N+ o# e6 A+ O4 B
其中:
9 }2 S7 [' v! Q8 @6 b- \(X'\) 是归一化后的值。
* F: w# k7 b- P* }  p- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
" F7 T( Y4 q3 W
, i6 O- u6 V7 o8 _1 B#### 归一化的特点
% z3 Z# Y8 Q  n- q5 m3 P' O4 K8 T: f& Y% m
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。* G# o1 @8 o3 h
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。$ p& G& Q5 i4 v5 a7 s  _: {
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
6 G9 A' }) O% W2 N* s; E" _+ v/ e3 T2 ^) `7 i; p
### 3. 标准化与归一化的区别; k& {  M. V) b) t& N& a

8 o4 @. H7 q: `+ u. ?| 特征          | 标准化                      | 归一化                      |
% J+ i, y/ s4 S! j. U. Y3 i|---------------|-----------------------------|-----------------------------|
4 y" k( ?9 o9 J- M8 Y) @' n| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
% q" w" d9 ]; v4 k/ ]: R| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |/ T; w6 K. |; S0 _7 S% D
| 对异常值敏感  | 是                          | 是                          |
1 z6 ^6 D7 Z7 y4 U  ]- t| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
/ b" X, a9 Y* z; P& q) t( N2 R2 c5 m2 K4 C2 }$ i! E
### 4. 在时间序列中的应用$ S5 Z! s( p  r0 P3 J7 x

3 j* U4 Y% o, Z2 E$ [在时间序列分析中,标准化和归一化可以用于以下几个方面:$ z( y# m* v4 N) G* Y

0 M' g& n) O6 `$ b$ S( S: M- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
6 ^* ^& T( c" s8 q% {0 Y" v( P- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
" F& g: s& c$ c0 r# w2 ?0 e( p- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
/ N5 k/ ]8 D) @$ d" r
' @2 T0 m9 a( c" ?; q( R### 总结
% I: y$ J  s4 ?6 G, y
! o6 _1 @4 V2 }8 `% Z3 i标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。1 v5 I, F( t. {  j+ r7 J% f/ C
0 m- M" v2 L: ?- x

# [5 d2 G9 z& Q' y. H7 S( f$ n; i  F7 x. Y# \

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-7-18 11:58 , Processed in 0.283440 second(s), 54 queries .

回顶部