QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1383|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1176

主题

4

听众

2887

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |正序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
8 \2 j5 @' {2 n; X+ y/ \
& I1 G1 T- A1 j4 k( U6 B### 1. 标准化(Standardization)! R9 h/ J7 p! i! }2 g. p
% x' u" t5 b! r& N
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
. e5 N2 a9 W% i+ F5 O% E) x
2 L# S7 y8 y* V& b#### 标准化的公式& n0 L) |5 F' r, \6 D

8 L$ j+ Z% D* N4 K" A* V5 z对于一个数据集 \(X\),其标准化的公式为:( d. K5 |* w$ Y8 d& @9 R+ E6 L
\[7 E1 {* u" {6 K6 q
Z = \frac{X - \mu}{\sigma}7 E' I% v' ?  B
\]0 J, b( I! o: I% l
其中:2 M3 u! w+ R* \$ P7 T
- \(Z\) 是标准化后的值。
: a3 g: j4 R0 L5 @( b- \(X\) 是原始数据值。0 z$ A& q8 ~: M8 p1 x9 n
- \(\mu\) 是数据的均值。9 c) P0 [  ?& D' x
- \(\sigma\) 是数据的标准差。- T. s! j8 {, Q' L7 y
( G. t: i1 s. D; ?  H0 z: n
#### 标准化的特点% f0 I. Y1 H" w5 O) r( m' t

! h- n% r/ Z: ~( i- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。) T; j0 }( ^7 V
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
7 `' t1 {; d& R/ d  K3 t' S/ f8 z4 P- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。7 O* m$ q4 m6 g! m
; q1 K7 J% I' a+ Y, A7 C  b
### 2. 归一化(Normalization)9 \! q" H; O8 Q: R, e5 f

, U" I0 j) I& s- \4 H4 O$ U; }归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。9 f  E5 e9 t+ _
8 w$ @& l, t* z5 k  ]! f  ^
#### 归一化的公式
/ r; Z8 t2 `( C! ]/ n1 I6 T$ o: f/ U. ?
对于一个数据集 \(X\),其归一化的公式为:
+ |+ i0 U# T% u, b7 q( ~" o5 t" w\[
9 L- |. y( N( f- s9 U+ eX' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}  |) w$ n6 q% N
\]
; q/ M, a0 P% j5 B或者对于[-1, 1]范围的归一化:
& T' I" S1 z6 g; r- k* U\[" _/ V) D5 p9 M( R7 Y3 `7 R& _8 U$ x! ]. C
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 12 N- m; R$ p# r- w; B$ T
\]- A, ?! K7 Z3 @9 ~+ d
其中:( ~" Q4 s* H8 C7 h
- \(X'\) 是归一化后的值。
/ `( _! F' G* {; A, j- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
3 n8 @. G' a( ]' @9 i+ {, g5 b* J8 Q; a1 C6 ~9 ]4 o* O& s4 a
#### 归一化的特点
' X3 Y  d4 I) A* C- ]
' s1 a. k2 b) O+ Z, k5 d- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。9 r$ R: g7 g$ t) {
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
& I2 v+ P& S$ J) z; Y- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
# N* c) }; A% }$ O( b8 U3 W
& g$ L$ ^/ [# ^! D/ N- H: ^# s- Q' _### 3. 标准化与归一化的区别8 c1 B. I) `- y) L% |
: f/ _0 d, t+ X, m% N( L
| 特征          | 标准化                      | 归一化                      |) e6 X; g1 f7 J" O1 [, V
|---------------|-----------------------------|-----------------------------|
2 v8 ~* T6 B" P  S  h% W; h) M2 c  n| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
+ `7 n$ ]0 b) k| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
$ \' m0 d) j4 i+ n/ q| 对异常值敏感  | 是                          | 是                          |. M# d9 ^- E- {  O, J
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |* V% W* Z" h  Y5 z3 O

! \$ q1 q. ^% m/ f8 h### 4. 在时间序列中的应用
) Y3 ^, ]: q" B1 y* [0 z9 f/ _; T& Y" a9 _9 u1 P
在时间序列分析中,标准化和归一化可以用于以下几个方面:. ^5 ^6 E+ G' r  X5 N" O) c

" N: E3 P4 t% M  y" f* X, \- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。' f  r, \% }/ o; }5 i
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
9 }! S7 f3 W- I  u. h( \0 p1 q- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。0 C" A  n3 w+ p- ^. A! r+ i+ _

( T* a$ P: W3 k7 \+ K6 @- u### 总结! F; O5 {' ?8 ^8 V

+ q( a1 Q1 R6 B; m$ S标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。: V' |0 H7 U' c

( d) |* j6 d# R2 Z+ j& ~, W" H, a. P1 Z

$ U7 M' S! c6 R( D

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-11-6 15:25 , Processed in 0.461126 second(s), 56 queries .

回顶部