QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1836|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1186

主题

4

听众

2922

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。% E* b5 `2 t* K5 v
: \; }" e2 O8 m) C+ @$ |
### 1. 标准化(Standardization)  @  A0 l9 T2 W/ U; n1 k
5 ?. O; o+ B' Q% V( h
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。. C0 [  S& b2 ~. j
/ ?& z) p; H. o- E9 x/ @) f
#### 标准化的公式( q8 f7 l9 @' I: U
) k! ~0 k8 Q8 j$ ^7 Q8 P% Z- Y3 s6 _' g
对于一个数据集 \(X\),其标准化的公式为:
, t4 l- c2 }" L6 j\[
  {  w9 F+ r: h* U, i! a5 u, QZ = \frac{X - \mu}{\sigma}( `& s" J9 i! y1 Y
\]  H' K' s1 d+ }6 ]- x& O
其中:
0 b5 {, ?; I6 u9 @! y" P/ y7 s- \(Z\) 是标准化后的值。
2 m# u  K9 ^& b9 k6 s- z" y: u- \(X\) 是原始数据值。
. R# Y* s" _! A* A- \(\mu\) 是数据的均值。' y$ U( Y1 L. V4 {" W5 H, ?
- \(\sigma\) 是数据的标准差。
1 j* l. z& H' S' _  l& @: @0 E& g2 d( G& k( \$ j6 B0 V. Q
#### 标准化的特点2 P7 z2 c7 [' e; ^

  {6 [# Y" y! w6 C- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。; i0 Q; P& e, |- g+ R" W) V
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
1 b2 x  ~4 @; p* K- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
! X2 a5 k3 i9 b, ]' E8 [
0 [7 ?! P. }# j% y: |: p1 L+ |+ M### 2. 归一化(Normalization)
" z) T3 m" `7 j8 s5 }4 X: v4 _6 t5 N. m0 |# h2 L9 q
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。4 x3 A  Y2 ]8 g3 W2 K
: F1 P6 F3 N/ F2 H/ O
#### 归一化的公式: F- T  z& l( B; D, _* ?0 f( z
& l) B' X0 ~+ {* U% |; k
对于一个数据集 \(X\),其归一化的公式为:
& Z* o* t0 D$ U* {" Y! F\[
* S$ \" N; b6 a7 w! }X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}
3 R5 j* ?/ a$ N  I: C7 V8 [\]
: H* l8 K8 `/ @5 T或者对于[-1, 1]范围的归一化:! Y: J8 u. F( x& x9 Y
\[
4 q/ [5 j- O% v- iX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
% \$ ]8 {/ j" S1 D& b0 g; H, I\]
1 M3 q: i  r: B( p其中:; e0 d- _5 v  v; _( F6 F
- \(X'\) 是归一化后的值。# _1 A) G& H9 @. H- G7 o
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
+ a2 x& d# |% h  u4 l9 F8 t
! \  `+ @2 s  e9 o6 [. N#### 归一化的特点
  J) h8 s4 c3 S1 q6 j# ]5 x/ ?9 a
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。7 O, M! L% a& _5 a
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
8 z6 J& s, C& C6 `+ S2 Z$ I  G1 z- H* R- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。& t- a% W/ V4 v: n9 F" u9 r

4 ~) j( C3 N' v  d, t" Q2 A$ C+ h### 3. 标准化与归一化的区别! |7 L; F" G/ O4 _# _, K! r
% V( o! x/ N! W( w0 }
| 特征          | 标准化                      | 归一化                      |
* t! X, \& e0 s|---------------|-----------------------------|-----------------------------|. j3 B) ?% W' y. x  E/ ~
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |; N2 K) {* P- b3 R& u; q% S
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
; s& S+ ]% z2 ~, Y% s& k| 对异常值敏感  | 是                          | 是                          |5 _& E- ?' w6 N7 e0 i
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |  N1 P* B' i: Q3 U$ v
  H! R5 C- ]6 E5 B% }1 {. \% R
### 4. 在时间序列中的应用' l. \' {: X8 H' [+ k

1 M3 j2 e: [/ I* m/ a* g) M在时间序列分析中,标准化和归一化可以用于以下几个方面:& g+ B. W- v. ?6 I; j1 m* C: ]

' a* m" D; K& ~  F# f/ O. D- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
) a" X& k" s0 f. @3 Z) d* }- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
( N" f3 S5 ]. h4 d3 y8 \- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
5 Q! o& i$ B. _% L; |. R& s& E
& p/ }! B, T/ ^% P/ d### 总结
+ P/ X) k' |1 |+ a( M( M1 a( y# X# V& Y4 q
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
: v  x5 U4 s9 R$ A# {) ]: f4 L! v7 O% N1 W! l# v3 L/ C5 z

4 w. U: {6 _0 {! i7 _
3 n. }8 M3 r0 n' N6 z! |

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-4-15 01:59 , Processed in 1.663589 second(s), 54 queries .

回顶部