QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1966|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1192

主题

4

听众

2946

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。$ Y6 E8 \2 @4 A: e8 e) _. r

& k& s5 t! j6 h) D: L- N7 |. }  X### 1. 标准化(Standardization)
; E) m2 U2 ~& M$ l
* q- l2 G0 Q' m6 y2 F标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。7 r, D3 M" p+ c- L
5 k# a# x! P. X' i& k
#### 标准化的公式
  n+ l% Q2 I/ s% ~! j, b
" ~0 u- F8 f9 X3 J! v7 ?8 L" u对于一个数据集 \(X\),其标准化的公式为:
$ v3 x+ z4 N9 D1 _" Q3 Q% N2 r$ l\[
# Q8 g. Q& T) m# _, z# gZ = \frac{X - \mu}{\sigma}
# G$ A% f* {! B7 Y+ A; @\]
) J. n- L: K( B1 m: t$ X其中:9 H$ q% K$ V3 D6 i
- \(Z\) 是标准化后的值。
" {: B: u% }: `/ ]- i: Z- \(X\) 是原始数据值。
) y7 U$ s) [8 }0 @& i: y- \(\mu\) 是数据的均值。
$ `8 I, P) A. y& M- \(\sigma\) 是数据的标准差。$ b1 @2 C7 s5 @0 ~- K) [/ y+ y
- |! w1 L( i# w0 d# i/ e
#### 标准化的特点, m9 m8 e, Y1 J- O' m

) w6 ^$ O: Z$ ?% _# I- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。# H$ [! C9 R# _4 t$ m$ ?
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
* i" G  W! l: g3 c( X8 B$ b- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
8 A7 d5 J- ]/ H0 ?/ |' j! [# w- M; G8 {
### 2. 归一化(Normalization)
6 g! k* E8 b5 s, t: W  x% z; P4 M8 q
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。, y4 h: L" m" W& c3 I5 L; b5 ~

9 N9 d1 X" l2 P/ R, R6 K) N#### 归一化的公式
7 ~* m5 w& d% Q; X+ o5 k8 t
# E7 L: K) h1 Z1 K7 u% D( [: v4 y对于一个数据集 \(X\),其归一化的公式为:, R# Q. ^) I/ ?! d' Q2 E2 f6 A5 d
\[  ?; [+ \  E$ Y5 ~8 Q+ H( [! U
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}3 x  M# b* N; V
\]
% `+ v- |8 t8 Q9 l或者对于[-1, 1]范围的归一化:- I, b9 v9 ?* X) u! Z! r* _
\[1 _3 @8 _. H& b: q  L) ~2 q8 t+ p
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
, T) n8 U7 B& Q/ t" H+ \0 w\]+ n  v" r* j( P! v
其中:
* n7 b7 D- m7 L- \(X'\) 是归一化后的值。) `- j/ ~+ d$ U: V+ Y* A
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。/ S# u0 i; B( T

# o4 I' N; G& b#### 归一化的特点
4 ~3 l3 v' l) e0 C9 z" V6 E
5 J4 r! W+ g7 m* m. Z4 [- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
% E. O0 W1 }) n3 i2 E- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。. v, j5 R) c0 e: o% c9 Y
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
' y" Q( k$ ]4 I1 i- ]5 m
/ _- a. n9 ]. C4 s( ?$ d### 3. 标准化与归一化的区别% ~7 |/ d2 E- J- v$ C" Z3 N
# N  N, b' G" H+ j
| 特征          | 标准化                      | 归一化                      |5 L  A# p" M( N5 ]# Y0 P: \5 W1 Z# |
|---------------|-----------------------------|-----------------------------|/ z% i- |9 i$ y/ N6 H2 N! ]) m" u
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
. [4 ~7 r# Q1 k& E% `4 H| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |! I$ D' F* t6 O# I( h" Y5 q
| 对异常值敏感  | 是                          | 是                          |  P. [" N+ q) M
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |! x" x( _- J* \" `& R& m  t
# @6 O, e  ?9 \+ ~
### 4. 在时间序列中的应用
( m" H3 x( [0 i- K3 u8 l
1 x$ y, k' h+ W1 _4 V在时间序列分析中,标准化和归一化可以用于以下几个方面:- K. q+ P2 U7 F' e" h* I( @$ b

3 @0 Y" O, U5 D" ^- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
' [. }! }; {$ f; W- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
7 g) u. d3 P  L# H8 K- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。. |# x2 w: J0 O4 \' n3 w7 B- s

# p6 w9 p; m* E2 x' P6 \  I, C### 总结
8 c8 s* `9 K) h% P5 c, B
* I+ e/ m6 ]4 x- @标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
3 `$ O! P# q. K+ ^2 j' l" c1 Q( d4 H2 Z7 l7 y5 d
+ J) h+ E3 E8 I) `" Y
1 n: `1 I6 I& J/ y" q' r

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-8-25 09:28 , Processed in 0.415388 second(s), 55 queries .

回顶部