QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 872|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1171

主题

4

听众

2781

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。, b7 ~2 Y: N4 G5 P% Q2 o1 t! F
! `0 b8 i# y# M9 I8 ]/ }
### 1. 标准化(Standardization)( N5 F" N% f: a9 Q; V+ \! \
: U, ]7 A9 G. \
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
! Q! y" a" W! o! }7 O. h
1 s- B8 U" c8 N. L7 v2 `4 s#### 标准化的公式
! j" u- L# h; c& s- w7 R, H4 c4 g* _0 `3 q
对于一个数据集 \(X\),其标准化的公式为:
) Z" _$ Y. [) N  b\[
6 I1 s! y! c$ VZ = \frac{X - \mu}{\sigma}! ~  n. V( ?9 X2 e* i
\]
! e! Z& Y7 o# S: J$ j* G* k其中:) c7 r# J/ H8 Y/ h3 p! @8 Z
- \(Z\) 是标准化后的值。) p3 F& V" S% y% T3 T1 D0 v3 P
- \(X\) 是原始数据值。
: u+ K/ q0 A6 [6 ]; o# @- \(\mu\) 是数据的均值。3 y" Y# B3 H. @( w  |0 N
- \(\sigma\) 是数据的标准差。
! x& V/ w1 y: [* \( O8 ^2 u; ?4 B7 `& ~- l7 \5 a6 R
#### 标准化的特点
. g7 W' @/ |) n% x4 A
/ A* H, H* H9 y% o6 D8 s- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。" g0 z7 m! Q" R5 L, Z5 F
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。6 K# z- I& x  b" V+ X1 @
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
" D- s. R4 i; C  l& i" q! _; s; Y5 ~2 U
### 2. 归一化(Normalization)
3 v# u" b% A$ k5 ?9 e; L8 Q, f
  s' D$ K: ^( R! S4 r归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。1 s2 T/ A$ R" s- \

! O. r1 r% X- C' K#### 归一化的公式
& ~" n' j4 J3 {9 k, b7 K4 h  D: b: _: y3 C  P
对于一个数据集 \(X\),其归一化的公式为:% U3 W& z( d+ @: g
\[
6 u) ^0 K  Q% x: y3 ?X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}  t8 [* F+ ~: Z1 @9 P2 _
\]0 P6 H2 X# B* F
或者对于[-1, 1]范围的归一化:6 c  t6 ~8 M3 D9 C' o
\[
/ o  `6 v$ @. [X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
4 U2 d( k3 }" G3 X) U2 C\]
! J7 {( Y& O3 O" `$ S  r其中:# {6 h: I5 w  |6 k
- \(X'\) 是归一化后的值。
) ]1 G0 C. W) {- ]1 v- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。9 w( i- f/ g& [2 R
4 t& p. T1 v8 T
#### 归一化的特点
1 k; L+ s$ I" K* K* P3 B. m; U7 J( `4 [% D4 d: N
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。, \/ L5 d. l% ^! b( E) d1 H
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
9 b. o; i4 `7 D! G# ^9 @- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。0 I7 [, _0 k5 u2 a8 u( w" Z# e' `( B# H
6 e8 z' {  E! @/ u* C  X# D
### 3. 标准化与归一化的区别
9 u' d. Y8 ^/ D. X* q' t8 o, Z: J0 b  Q" {
| 特征          | 标准化                      | 归一化                      |/ L( g( O& W  \) K4 B
|---------------|-----------------------------|-----------------------------|/ Y5 W+ ~' l  g$ u7 l* t7 H
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
' F1 e2 }( q9 @8 M( P| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
* p( e  U/ R, Y- h* `6 @: K. _| 对异常值敏感  | 是                          | 是                          |
- Z, f! V$ K" J9 `) d| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |* ~6 P; Q7 o8 f- h- n; i9 t
/ g1 \4 e2 U- @4 }
### 4. 在时间序列中的应用
  d: E! I9 E  y6 c8 R$ [- b  M5 \3 V) y5 @
在时间序列分析中,标准化和归一化可以用于以下几个方面:- }3 |% Q8 D$ U; T; y/ J
- [7 \' D1 a. h8 u* a( n
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。2 O) ]' D# e/ I9 {
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。' H6 q) `( p# f8 o2 `. k
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。. J& F# B& ?7 x. _+ L4 E

4 z8 x5 a& V  L9 p# O### 总结
& H5 _2 q. g% R/ N/ |6 D7 l& L8 K' l6 y
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。! u7 {, J$ s9 Y

: K- _* g3 V  r  @+ L
3 V$ s; ~* ^; \. a# i' `
9 H+ |3 t8 H5 ~) l' J+ X

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-6-24 07:50 , Processed in 1.039859 second(s), 54 queries .

回顶部