QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1958|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1189

主题

4

听众

2934

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
8 U9 @0 @# _. p/ g( J# h, N  ^  |, w+ k5 l0 x5 D1 o
### 1. 标准化(Standardization)
0 D: u: @! F; w7 Y. G% Y, e* P: t" r6 V1 J! K8 g' p! K% z
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。9 x. k7 q4 A; H! l# X% d+ H3 j9 p1 b

- p" w- f# m5 _$ _2 Z1 P+ j3 `& p#### 标准化的公式" \7 e( I7 N: U6 @) L1 A3 G+ n
4 m/ {: I/ I+ W0 L5 v
对于一个数据集 \(X\),其标准化的公式为:8 ?( t* u! O5 N, f6 k
\[& c4 S4 B9 n3 G6 c' ~
Z = \frac{X - \mu}{\sigma}
1 D$ I5 x; }: ~+ k1 U% b$ k% N; \\]
. \8 q% z. V( r* r! r其中:
( M6 A# s. ]5 _* G0 X+ \& C3 K- \(Z\) 是标准化后的值。
, W7 |3 Q( b3 P+ ]( B: z2 M- \(X\) 是原始数据值。
2 d8 A, v; t9 X* j- \(\mu\) 是数据的均值。
" R/ s! ^, \/ e) S) }- \(\sigma\) 是数据的标准差。
% V: Y/ |# c8 b6 T
  D7 S" l/ s  }: K#### 标准化的特点
$ P$ a, T0 f/ z+ ]1 |4 E2 h9 F) R
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。, t/ X' e- L% h, ~2 ?
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
5 ^  K! E8 c1 Y8 l- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
2 M% Q! R, R+ g% g# d  Y* Z1 b+ v0 m% U" M, S4 K! D
### 2. 归一化(Normalization)
5 ~5 E% b) t% A7 o. I8 T! Q+ R- A
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
6 J3 ^9 I5 @. `3 m0 q$ a& W) U% o
3 N$ A  t5 H" D) S. G* t#### 归一化的公式& ]3 @* H4 e! z
. V0 F4 h- L3 X, D/ }
对于一个数据集 \(X\),其归一化的公式为:
2 X* x# W) L6 E: J\[2 G7 d4 d' X( k0 N" M% A, X" r
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}
/ h" [8 Y8 K* ?6 t, Q. e\]
5 ?/ Y% a1 l3 g( D; U或者对于[-1, 1]范围的归一化:0 o) n$ U+ P" d2 Z/ v
\[# r+ E0 W% n/ X: [1 o" T) ?  s: r
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1% ?& |! l1 B+ ?- l' L
\]. X3 ?! E+ \3 `: F: V0 Y
其中:" h! M* g2 o0 F( B; V- _% U$ m
- \(X'\) 是归一化后的值。1 K% \& U4 J) \6 r
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
, C: s$ a( R3 v$ S: z
, r+ A! X& O' c7 ]8 A#### 归一化的特点# _2 S& \+ Y; Z; ~6 x- E

/ Z. T% |" ^! K- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。( j0 I0 m- N5 Q
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。2 T4 ~* t- f' q" }6 X! D! t: |( ^
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
# S$ s: Q7 b# y
7 J$ x1 H; n- X2 `0 c$ f### 3. 标准化与归一化的区别
& m! A+ A- @8 ]9 T# h8 n$ ~! o6 W& w" r, E: C4 P) W5 b. l' c
| 特征          | 标准化                      | 归一化                      |$ O& e, {: ]/ {7 c$ p; M
|---------------|-----------------------------|-----------------------------|
4 F$ @3 Q5 j3 w; l% a1 y: I0 v) j| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
" P% h; u. b8 n) k' g| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |: }& M0 {, a% _: B' C
| 对异常值敏感  | 是                          | 是                          |
8 P. \  {/ S6 Z# `| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |6 O! U: e1 n5 x. h

2 `3 }1 ~, k' [) P0 H### 4. 在时间序列中的应用
, E- R. y3 O  W5 F6 ]) s* w& E: ^% v/ Y6 U
在时间序列分析中,标准化和归一化可以用于以下几个方面:
1 b9 X: b* w5 x( c2 v, [7 U% A' K+ i2 p' _1 E% N
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
" \/ J: _( o& w; G9 e- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。: [6 |# _$ i" C, @9 a& o& r' |
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
, {+ s" C( @1 B9 C/ O7 Y/ F0 l3 D
  w) p. m0 d9 G- ~; f; u### 总结
9 r7 K( [2 f( d4 z$ h& ~2 r9 E+ L: s& ~- z
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
" ^/ N/ |. }$ U6 ^% O3 z8 h, f" R5 u. o% Z. H( U" j

5 y0 H9 j% m9 n2 w  ?: z" s$ }* F' N; v" a/ I& i! s" }

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-8-6 09:35 , Processed in 0.418458 second(s), 54 queries .

回顶部