QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1881|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1188

主题

4

听众

2931

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
6 ?- Z+ M: H' z# W( a
- @' U- G+ J$ s8 J1 m' J2 z% b- S: U### 1. 标准化(Standardization)
) ~8 X# F) {8 h6 B: t! \
5 I" e' R3 x! k  Q6 v6 N4 G标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
  e; V4 n; X0 O- w1 `$ W7 P+ e' _+ g5 ^7 D
#### 标准化的公式, L  W9 j( T4 s, b

: {9 V) }" u( l1 Z$ T; X5 k对于一个数据集 \(X\),其标准化的公式为:2 }0 [7 P2 ^$ i% H! N' g4 q
\[5 S2 Q5 S1 C8 T; B4 j4 j% V2 \
Z = \frac{X - \mu}{\sigma}
6 P9 f2 N; n5 k\]
" I6 J- o& ~2 N% M( a其中:
! w( [) a6 n2 p- \(Z\) 是标准化后的值。
9 j* [  [! m# G- W& c, m- \(X\) 是原始数据值。, j# M( F2 e+ h" F5 R
- \(\mu\) 是数据的均值。
$ N9 ?- P- j/ t: z! l6 K4 \. P. Q- \(\sigma\) 是数据的标准差。3 L7 q( e6 s7 H: D5 @- \
) [% C( L- L! J
#### 标准化的特点  a/ {8 f; ]# h. }+ U* Z+ }" o3 U' o

: T; n0 E" @5 x6 `# d: `- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
% P8 Y* ~7 p- `- F- o) B- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。" G5 \  Z7 A' e
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。2 r7 @) g( M# I: O# c7 ~+ u

7 k" W9 a  h/ |* c### 2. 归一化(Normalization)3 ^% ~7 N4 V  d; g& s
6 g0 S9 W+ C8 \3 L& [
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。* \" X: y; m, \. d" ?: y0 u: M5 D

3 W/ E8 C7 z5 h& i#### 归一化的公式% @- }) D! R2 G. R# W2 T9 c
. y( q! C0 y0 ?: y! F
对于一个数据集 \(X\),其归一化的公式为:
. h. \1 x# j7 ^( J\[4 ?4 \' L( S0 X* h& [: ?. A# ]
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}8 G) J: }( T- Z% i: r
\]
' s: F) M9 c& b1 O, [) d或者对于[-1, 1]范围的归一化:
1 T$ B# [. y0 }8 C9 V5 T. d1 a* z\[
5 N" v( i0 }( c: I2 j4 aX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1% ]5 l2 `  o9 T5 X2 ^  b$ y
\]9 c5 p( l( Z; Y3 u1 J* N- Q1 A* ]0 A
其中:- P6 K# a' R2 J( n, v6 u9 ^" \( ~
- \(X'\) 是归一化后的值。
, h0 j) Z! V4 U, Q) }- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。- Z2 E: H) ^; T) k
  R$ |, d$ x2 q' M( [
#### 归一化的特点/ [9 n+ B/ Y  |9 A- h# ^

7 O+ W# l7 a7 I* B- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。6 l% P/ C2 ~2 {' c% O( o1 t
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
) \: Y2 o6 H+ n5 O+ s3 d6 B, j9 b- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。+ S6 `) }5 |- |, b5 J5 p9 j  s

- z; t. z9 I0 n### 3. 标准化与归一化的区别% b. W- h) n, e$ Q) c' Z; i% n. D: a

4 r- b) X: V# P1 ^; P9 z| 特征          | 标准化                      | 归一化                      |& r" U, t3 a) O2 N7 g
|---------------|-----------------------------|-----------------------------|9 j% h  S" {! I0 K
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |' Z& Z6 e, N! r* X6 Q
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |8 ^2 s: ~1 Q5 x& p) s: @( _
| 对异常值敏感  | 是                          | 是                          |" Y9 @9 L. W. t  U3 p' G* F
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
7 b/ h6 v& T5 O* F3 {$ ]9 y; x4 k4 j/ I/ |! F  e) y& r/ F/ d0 d- t
### 4. 在时间序列中的应用
& m( I1 x6 V; a/ y1 {8 N: ?2 P9 Z: @4 u! R% ]$ T
在时间序列分析中,标准化和归一化可以用于以下几个方面:
/ a9 a* _5 H! q! ~! o
) ]8 E; R. Q+ ~0 V  p8 a4 O- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。% c% q% W: t* j2 z; {' ?
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。6 t. {8 d: X0 ^2 K! Z9 q" ?
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
1 R! h0 q) \7 L5 S+ U3 e- n% T( y4 y' s
### 总结8 X% D9 T7 `- Z- u1 X
9 ^; U  h$ ?3 i0 L8 P9 m
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
0 j& Y) M1 g5 C  s' i
; x( S; [2 _" J9 H# X& J  q" ^: X; l
' l6 c9 F3 _4 d$ _* [

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-5-25 22:28 , Processed in 0.553437 second(s), 55 queries .

回顶部