QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1965|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1192

主题

4

听众

2946

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
, G2 \4 u3 z$ m& o5 S& m3 K# W. P
& z  L4 m: C" D1 H& `" O### 1. 标准化(Standardization)
3 \/ T1 ^4 m. ?! o8 ?) d
) S  g; w( Z: F, c% ^标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。8 z7 E3 Q! ]! K  P

8 M! q& [& f2 l6 v; q$ D8 K#### 标准化的公式1 i7 ~- l: B' {5 n

6 v) j3 b# z. e( w9 x对于一个数据集 \(X\),其标准化的公式为:
" u; }8 @! A, K% k- [% |# G\[
8 `" D6 L# _& ]/ I+ v% xZ = \frac{X - \mu}{\sigma}" J, @! s: s7 [8 r
\]
4 v$ f$ E% `  O8 X# r9 Z( _  k/ v6 Q其中:
. N, w. A+ q' z7 p# j- \(Z\) 是标准化后的值。1 @8 O$ S. ?5 C6 ^' ^# a) p
- \(X\) 是原始数据值。* Z. J1 a2 c2 f4 R
- \(\mu\) 是数据的均值。! {& q. q, n$ D' h$ K
- \(\sigma\) 是数据的标准差。
' Q9 W: ~2 b. ^- h
7 b; G: l( |) r- I  [4 E#### 标准化的特点* E7 }  s7 s- A

; F, U2 r5 x5 _' C* u- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
  x7 o& i( ~$ M% A. u$ H- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。$ P; M; U" S1 T% D3 A! J
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
1 j2 r8 J3 }7 K! j
! ?$ k) ]' P) i6 {- Z( I# k) A: J  h### 2. 归一化(Normalization)+ C% }6 s0 [+ {/ a/ n9 m3 g

3 H4 M! r$ b$ N5 |8 O# ^3 M归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
. Z# P, d$ z+ u7 P- Z8 |. C
# c: {7 i& n* ~/ m1 `! ~#### 归一化的公式  G9 O7 S( v' M  W7 T
( Z3 m( w! |0 r5 n0 x
对于一个数据集 \(X\),其归一化的公式为:# z/ K9 H4 T  l0 B
\[- s' E+ ~" y  ~) d3 c
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}
4 R1 e, a, u. L0 e, C% U\]
' ^0 T# a/ V( v& A4 g! I' i或者对于[-1, 1]范围的归一化:2 a3 k  T5 {$ V0 r  U& J  V) I
\[
5 C. y/ u( a$ u" FX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
& d( x6 h5 [8 z& \0 c, u\]
* u- {' k! a5 Q' |' N其中:* M% x" g; m, R" c5 W8 j" R
- \(X'\) 是归一化后的值。9 V8 l% E# G1 Y7 n0 V( i$ q
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
  n5 e) [, O0 {2 e9 p. U' K$ i
* r7 g5 M, I, v6 h1 x#### 归一化的特点$ m) d( i* o4 n# {& X

* g! A  A( W6 B; g! Y2 \6 z- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。0 n' N9 |: B# g6 t4 |
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
& z9 v* ~* U9 s- J/ S5 i7 Y- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
5 A; r' H% D) y2 t4 x
. d! d+ k; p: _* h# o4 Z$ N### 3. 标准化与归一化的区别2 _$ p0 g3 i' R3 a3 e/ `- u

5 U8 p8 n+ t# N| 特征          | 标准化                      | 归一化                      |, \: j6 p& m: t
|---------------|-----------------------------|-----------------------------|
& p8 a* p  v/ m' }  Q, F- A. h) C- r| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |, }6 v- O" ~, U& |8 b# ^2 `
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
4 u- O( @6 o5 Y  U0 `& e| 对异常值敏感  | 是                          | 是                          |
1 d6 J4 i& N& e) i| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |) y0 Y- q7 |, z+ l' P
9 v: J1 I, n+ P, v
### 4. 在时间序列中的应用
" e- l# `( t$ y6 u% E) N* N  e* c- z
在时间序列分析中,标准化和归一化可以用于以下几个方面:
. }/ j6 O/ p. Q2 V$ t  [& C/ o* p+ v/ k8 \3 a' x
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。! e; |# ~% Z6 X
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。! ?& x3 ?8 \4 r5 ]& d4 r0 p: T
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
* c2 R- F* I$ f5 ]
" M/ j8 K0 _2 ]6 z. w9 }7 C### 总结
/ _1 m% q3 O6 Q  l- t& H/ F
/ u- y4 T4 o( ^% C3 \标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
2 @5 A, X9 y1 T/ t0 i' q" x
6 f& K% h% p% S- v8 O( J! s
6 }* f0 K/ Z$ z( W1 z2 `/ w  O+ W6 s6 N

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-8-25 09:25 , Processed in 0.736056 second(s), 55 queries .

回顶部