QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1310|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1176

主题

4

听众

2884

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。9 H" j- E* X) S8 ?6 O$ q' E

' v5 l2 _& W* u! p& X8 o### 1. 标准化(Standardization)
% K: K% p, Y" l# j& t- g
, g: _: y! a1 R& G; O- u标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。; n+ N- e4 a8 e! |
0 W5 C1 l7 }! v5 k  a, H$ z
#### 标准化的公式
6 ^  p: E1 V! R9 [' H9 e6 K+ ]0 J9 N# n2 U1 U
对于一个数据集 \(X\),其标准化的公式为:
  t/ m3 A) S4 \\[
. p# o8 f1 w3 n6 ~& R! }5 vZ = \frac{X - \mu}{\sigma}
. q! r) W0 s* `: E( P\]4 `* i! t4 V  P8 z% v" z
其中:
( f; g* x  _. K- \(Z\) 是标准化后的值。
. D( V1 [8 k5 P! r3 E  e# i- \(X\) 是原始数据值。
7 Z/ I4 H0 F+ g. Z, j( L0 [6 W- \(\mu\) 是数据的均值。
0 Z' U- Y3 r: w6 p- \(\sigma\) 是数据的标准差。
6 z6 c) z) C& U
( J6 k4 _- R8 ?#### 标准化的特点
4 t1 X4 K" Z' y- R8 E$ d
: C  Q& V/ A( E- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
+ x" h" m  t* P" O8 \1 F4 }- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。8 G, Z4 L  U. q
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。7 W! Q% a& @9 I! {5 {4 w* Y
7 A) \; g9 H' r  s5 J
### 2. 归一化(Normalization)# ~! o% {3 C$ G  W) k7 }) a- p2 b

: {4 @1 e, ^% W/ B3 S& f0 G/ A8 |归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。2 X8 B9 \, f" k5 D' _) u2 k

9 J( B7 f  k3 C( j. y  I6 R- \#### 归一化的公式
7 {: ]+ R1 L* d( @7 v# Q+ C/ y) A5 H5 z) a& u- `8 u% M
对于一个数据集 \(X\),其归一化的公式为:
8 M8 E# N# A' Y0 @/ H\[
: q& n" \4 O# pX' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}
/ y& ?1 G2 }, W2 F. V* c\]
! c0 o4 l% l, e% C* w  G或者对于[-1, 1]范围的归一化:% F8 o; {1 e" ?6 R: Q/ W& h9 Y/ G
\[
# j6 K; Y+ ~. L$ P  WX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1' k! o$ h. M! A8 F* H
\]( X2 b1 |! i4 B! q6 t7 S
其中:% ]: _" C. r3 |7 q& i. u
- \(X'\) 是归一化后的值。
& `' L4 R2 L0 M6 a" \, F" Y, m- K- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
+ b% o; F; f: ?- z/ t! W8 L" Y/ q, [( y- {# }" b
#### 归一化的特点3 V8 I( s' q# F* V3 @) H

2 o) ]6 q* b! q- R3 a- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。, ]1 M. w/ x2 J+ Y# Q3 U& e
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。* m" T& ^9 R# R9 [2 j: O
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。0 _: n3 j0 f0 m: [; h7 ]* p4 s
# c) T: J" ~$ e  m
### 3. 标准化与归一化的区别0 L. L% j9 w7 B3 B
9 E) r) f6 n( h. S4 |9 o
| 特征          | 标准化                      | 归一化                      |. f. x. {& I6 X/ C
|---------------|-----------------------------|-----------------------------|
* ^" l5 v6 \# T| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
8 _" I6 _/ N5 `$ K' v! G4 o) _| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |7 a( S  L1 U/ X5 a
| 对异常值敏感  | 是                          | 是                          |& E* O9 a$ X( F+ [1 ?* {) c
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
& Q8 m, Y6 R" P9 f& r) @' O7 i8 D& R0 p$ ?- C0 s
### 4. 在时间序列中的应用+ ^9 e& L* ]2 }/ u9 H# L* _" {

% ?) s  n' C# `% Z% o4 N! W在时间序列分析中,标准化和归一化可以用于以下几个方面:5 H( x4 d9 j& w5 {' [
+ T; e9 w! j  x5 C
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。/ o0 R# {4 F% K' ~; O6 k
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。% ~8 }, w" W/ k" ]! V7 G# h! @' _0 g
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
7 e( y, \% I/ F) U- ]; R% @4 p7 d/ j
### 总结
7 }! h8 ?9 J3 b9 w: E4 J
" U+ L9 `( Y, O9 G8 @标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
" Y* g# J' u7 N% h7 x0 F, G9 |! A1 e

  ]0 B/ k$ K4 a8 C' [) ?) M5 T. S4 F! o% Y9 |2 M/ I1 x

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-9-17 03:31 , Processed in 0.492462 second(s), 55 queries .

回顶部