QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1834|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1186

主题

4

听众

2922

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
% y! M/ }  ]0 {$ d3 o
$ ?/ b- k6 A! f+ p7 y### 1. 标准化(Standardization)
( n& ?' p! m3 e2 u/ O# O5 p( a
% F2 z2 b% J- U, Y+ R! A. a标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。" L" c9 J: A) ?; L1 P3 p( j

9 E& U5 B( i2 ?. P# y#### 标准化的公式
( X% I5 R3 j* e6 i' P/ {. A2 a* T5 f" d7 E4 S) y% Z7 Y
对于一个数据集 \(X\),其标准化的公式为:
% r% f$ C0 r( b8 ]) Z$ i# F\[
* A) l8 C& L8 j. ~Z = \frac{X - \mu}{\sigma}
1 a! O$ S! T( D1 H) L+ F\]% H# [! y- \; |5 ~) F; t: d% U
其中:
8 A2 S) |8 ]4 j6 S* R3 W) y* }- \(Z\) 是标准化后的值。
" K: |3 L5 _' J0 k# N4 k. A9 v- \(X\) 是原始数据值。% U, m& L4 @9 P" ^8 m/ Y! D/ Z7 |/ j
- \(\mu\) 是数据的均值。
! I( a1 x; I$ b0 j! d( J- \(\sigma\) 是数据的标准差。$ ~4 _, h( g* T4 c' ?) z( f$ r

3 n+ H- Q! M; m7 s* T#### 标准化的特点
! z/ D) N& \. W, p! n2 X- {1 v5 c
( s1 n8 q8 |* ^; f- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。+ w! u$ B1 E4 P) x! r' a, w
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。% L( c7 p" a9 y& P& E
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。! E5 x$ i- u8 o. Q% j. u- Y. C
+ [4 l; }1 m$ g- R
### 2. 归一化(Normalization)3 F" H: J0 Q* A- `2 i
) w6 ^6 r2 o/ [, r3 D5 w* d! E
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
1 _3 B0 C9 J2 z" ^8 M& t# Z; s$ ?" m* ?- a
#### 归一化的公式7 z( t0 L2 I5 e1 h# F6 w
) F1 F9 ]6 a  b$ |
对于一个数据集 \(X\),其归一化的公式为:
. R" K% j0 T. Y9 T1 s\[# w6 Y+ [' V* a6 T
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}+ @& }) R1 ~8 z$ q, A4 a9 |$ b% n
\]) \+ L# K0 A7 T7 D# v6 Z1 u
或者对于[-1, 1]范围的归一化:6 d  l8 }! |# y" P" t; K
\[0 {0 [1 T8 ?, k' V
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
0 j6 h6 C* H  V\]/ w2 d4 C% E& y' {1 x! m
其中:1 Y/ G# {5 d+ a+ r
- \(X'\) 是归一化后的值。
' \; y$ q4 I, P% d/ f: Q% e' [- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
* T# r4 x* j: @! |# t' O. Q" w  j# Z7 x# l7 L5 }  i
#### 归一化的特点2 T3 c* N9 U! h" s3 A" p
+ C( i- q, O" Y; q, p+ q) O
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
0 S! ~7 f1 k/ q- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。' [& E- y  ?& c  r. I5 e/ o
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。0 l: x1 l% g5 B# J- o6 ~" ]+ N
7 [+ F4 E) A$ d! Y5 R3 U
### 3. 标准化与归一化的区别0 z7 i" `% c( o% p

+ e; G$ ?- ?# M  k| 特征          | 标准化                      | 归一化                      |  i4 T& f# Y2 N& s: |& M; Z
|---------------|-----------------------------|-----------------------------|+ f: a. O$ p, j6 {
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
9 O8 x' k# ?  Y) \) [) ^| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |% Z! v9 }, |* B
| 对异常值敏感  | 是                          | 是                          |
4 o/ F( i" e) s! G| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
1 W+ K6 n/ q, u0 y9 z" I/ u% J6 M! a' j& N
### 4. 在时间序列中的应用9 C- W0 H6 u' F
# _% W) x/ O1 v/ T
在时间序列分析中,标准化和归一化可以用于以下几个方面:
% h/ `5 m( U& b0 O- d1 X7 g$ y
$ h: M2 G; l+ u* |$ Q8 t- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
# m8 E4 T( U/ a- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。  C1 Z# A" R2 P2 L& q5 L3 ]) @6 ^8 d
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。1 T) M9 g- \8 H/ t- r1 H

5 ^1 {/ A; G0 N3 \, N2 w- X### 总结( ~! ~& ]$ D  j+ a8 }( W
' J  N+ [3 \# F4 y
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
$ V* F: ^" r' k9 w' {. R1 ?5 j- _3 I8 z! ~8 Y& D$ m& B

* U$ `) N  P8 c, J1 P. Z9 n, }& R/ v

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-4-14 03:47 , Processed in 0.442169 second(s), 54 queries .

回顶部