QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1880|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1188

主题

4

听众

2931

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。% N) A# g4 U# w) |( Z$ a. F! }+ ~6 ~2 M
6 U% e# w, u8 S4 X8 ?
### 1. 标准化(Standardization)
0 ~4 d# b5 q* M. D' k' J: R  l% f% I; K) v+ o- x, r/ X8 q& ^
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
& N. u6 l5 t* ^  Y' O1 e% t. o9 G% V1 c' X
#### 标准化的公式9 u; ?) }: w4 d/ w6 k% ]0 g

7 B8 D$ T2 B. @对于一个数据集 \(X\),其标准化的公式为:
( J; I4 D+ }6 ?7 g& U, D# F\[
4 w) l: Q. ^3 T$ N# |" x" DZ = \frac{X - \mu}{\sigma}
  {+ U1 d3 j; ]0 Y5 z\]
; c4 Y" h0 V  x6 ]& e! A/ Z* e其中:
5 A% v) d# P) r7 s! M& b4 S* g- \(Z\) 是标准化后的值。# s7 v0 N% ~( _. ^
- \(X\) 是原始数据值。: [0 {  w+ l+ V% n6 I1 z9 e
- \(\mu\) 是数据的均值。
2 J/ ^/ j5 G( {% Z1 I1 f; ?$ h- \(\sigma\) 是数据的标准差。! J) S4 v; S, g5 h! ]" C
: x7 @' B. z! z% f
#### 标准化的特点
9 \+ ~' a) U0 h+ ^5 y% o
# Q7 H1 L( s# U& @- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
4 D5 \2 _+ C& u9 U+ d( n- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。% }& R4 _" r% o0 j$ w7 R# c$ X
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
) L+ q# v9 h2 H8 D& s
% |, M/ }1 t5 k6 g4 F0 }% b### 2. 归一化(Normalization)
# S3 J2 d) A& L' Q" u) {9 C( V6 e. V# i
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。, _3 k# @$ @. ^/ d

  K; h* E* L" f; J  D! r, C7 d#### 归一化的公式
' [( \+ y# N; W, x- ]- s" K9 z  N# o% `
对于一个数据集 \(X\),其归一化的公式为:
) ^5 H3 @1 N- m, f\[
( z* e8 \8 y6 g* Q% aX' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}
* u! Y! n" f( T* P\]
' f, {* b- F; L  M! k' O或者对于[-1, 1]范围的归一化:
- h; c' M- G0 h9 ~* w* f& R\[
! \7 t, C6 H& u6 e9 zX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
" }9 Z) g7 Q/ }0 s! s\]" W7 m" T, H  t) D" Z
其中:
5 |/ b/ U) S/ M$ t3 J- \(X'\) 是归一化后的值。
% a( W/ `+ R" j: L# g- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
7 r/ v1 `" N  a# r8 u6 h' O5 j
  O  [5 D# b* t% g) Q' s#### 归一化的特点
" Q4 C- y8 q8 m  a% W$ ~0 b% h
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
" B$ F0 J; E2 u* b! R% k- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。/ w/ Q3 `9 R) [2 T3 G- a
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
) u7 }# w! D, ?1 U  E, S- o* A! x. A- ^4 T5 T
### 3. 标准化与归一化的区别  E8 r. G) E) V0 i$ |! q! @0 Z

* ]' r. Z' r9 x6 p' d| 特征          | 标准化                      | 归一化                      |( v9 H- }% n0 Y
|---------------|-----------------------------|-----------------------------|
7 o+ K: i1 R% \* @4 S| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |% P& x1 f9 O, O0 V
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
. e1 `2 J$ o5 T7 T9 R1 `, K8 z# b| 对异常值敏感  | 是                          | 是                          |, @+ x4 U- k0 w, f2 d( x, ?
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |6 ?' X4 x  o8 M+ }2 W7 D0 J
. Q5 h" m# Z+ s) }6 M
### 4. 在时间序列中的应用
$ s' u' t, H) K5 @! f' N( m# I" U1 A3 p& s
在时间序列分析中,标准化和归一化可以用于以下几个方面:
! z1 A0 \% w( A% l/ O9 p0 c" \- Y! L& y* i
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。4 j% H4 n( j4 s
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
3 x: }8 i" i1 Z1 w0 L  i- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。! c6 J! T0 e! X9 e6 x2 R& t

6 m8 @+ U9 a. l( M& X" c" D+ B7 Q### 总结
  w2 T7 x1 g/ z2 X/ U/ B
' ]8 v5 H" d: ]4 I1 |3 D! q' ]8 A标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。' s) y! S8 f1 b
; m2 V) B% \2 K, M) P: c! p
; X% B+ l- j( x9 ?
! U  S" Y1 _( e: C, n; v

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-5-25 20:46 , Processed in 0.392320 second(s), 55 queries .

回顶部