QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1832|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1186

主题

4

听众

2922

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |正序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。2 v9 E: n1 n" Q& |: W
" N7 P6 [' }! o4 n: v
### 1. 标准化(Standardization)' E$ d9 }5 S- u; c  ]2 ?

4 i- E. C; T+ T2 y) s. V标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
  i  B. V4 B5 u+ r7 n( p! b0 Y* b1 ?% W  R) o
#### 标准化的公式" w  ^5 X* H9 f! q6 M0 G) A
/ F" \2 X' `, ?) c3 w& x% Y
对于一个数据集 \(X\),其标准化的公式为:- a  Y7 N( z/ {: k( C
\[
. G: n7 Z% g0 e% b+ r- kZ = \frac{X - \mu}{\sigma}
# z+ c  {7 Q/ J6 J1 Y: V\]& r/ g: E5 b; x- k3 g3 V
其中:) t7 C# q7 r/ O3 C7 e0 {  C
- \(Z\) 是标准化后的值。
; n4 ^9 ~) ^; h- P- \(X\) 是原始数据值。2 F" J7 y: W& ?) q9 f2 B, C
- \(\mu\) 是数据的均值。
) X* [: r. r1 t% i7 E. [5 p( s2 e- \(\sigma\) 是数据的标准差。
  z* G' |+ E( P9 _- E! D6 T
* N$ e! M  D5 v7 @#### 标准化的特点3 Z8 V1 o1 R% m) n
* I3 M' H" q, |0 o# r' |, I
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
% D+ A- ~! B0 [9 @" M- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。! ~" V( ?+ G. [  h' q8 |
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
2 y$ p# n9 X4 _
/ I: k7 T  O" ~. x5 y### 2. 归一化(Normalization)/ _) a5 Y! v$ I& L% O; P& Y0 R
' ?1 v0 D# f6 v' S) @5 w
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。% x% e4 ^. C8 N- m# ?
( s( M0 u' r3 L( t" s; _
#### 归一化的公式) w) h* z$ l& {5 `) h

# m6 @. t# ?6 {* i8 \对于一个数据集 \(X\),其归一化的公式为:- ~+ j9 q1 m- ?. Y& [* t. ?
\[
3 v, w: A" o4 ~3 ?) }X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}: S/ \, J* Q% R
\]
# _4 Y& f& Z' r( M或者对于[-1, 1]范围的归一化:& O! }$ S5 w0 g. k8 Y7 S* X
\[
# L- N" h& r' t' C; m+ ZX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
5 C; Q& x9 Q/ [0 V1 U; U) M' u\]
4 j4 q3 Q9 a4 I$ @  g其中:9 w) Q$ T9 j& M
- \(X'\) 是归一化后的值。
' w5 U- o  z2 r3 I4 J- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
# ~8 G$ r& k8 M, y2 Q; d  x" Y/ F' @. V( k! A* D
#### 归一化的特点
2 f3 G+ J( J5 \+ b1 k& f: E7 ?/ e  y) ]5 Q! f5 E; P+ m$ v
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。5 x: P+ U! _# @6 ^# O/ |* l
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。& ^1 Q/ R2 m5 _
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。. p2 d# H0 R3 h' W' U5 F6 B
! Q0 M3 E: S) }3 s' a' R- C
### 3. 标准化与归一化的区别1 d6 j# f: K2 l# M' w. Q# r  ?

3 Z5 R9 m* d& j* }, E/ @8 {' W; j- j| 特征          | 标准化                      | 归一化                      |
$ _1 N4 d+ v4 c& r|---------------|-----------------------------|-----------------------------|
, Q& l" P* ]! G* P( ]| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |! A' C6 b+ C$ |9 Y& |7 {
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |: B* {. {. g/ j/ I. G  |4 k
| 对异常值敏感  | 是                          | 是                          |& Z2 \) U( H7 w  f
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
* z) p; J; q: F: U1 B
( L0 _, V6 r. P- [" M### 4. 在时间序列中的应用/ B8 c: o5 h8 S6 O$ [
) z/ a' f6 ^( s$ N; F' y* c
在时间序列分析中,标准化和归一化可以用于以下几个方面:
: l% h8 `/ U+ L3 ?9 R! z
2 k* z& t1 d. P0 h& P  n- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
, c5 `( f  z$ m- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。  p7 ]1 z* T# m! C( o
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
5 @2 d1 l* ?' |
5 F& j# q8 W1 E8 A7 }/ a### 总结
. q; Y' ?& X7 w' ]# z) R" y
3 f7 h1 D; T; Y! @3 ?标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。4 _5 p7 N& E- L* P

4 s  S+ y* K- V$ A' `* l% j) L8 p. _" R% P: `/ q8 H! P# J( z9 [
( |4 T2 R3 `/ u0 W1 ~. `

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-4-13 18:02 , Processed in 0.435337 second(s), 56 queries .

回顶部