QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1957|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1189

主题

4

听众

2934

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |正序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。+ `* U2 e$ W/ M; Q' y/ j" U1 o0 P, w
7 _1 |% z* N  M3 Y/ R/ {7 E
### 1. 标准化(Standardization)* A2 ]( P$ B2 C' c8 P: U
  C8 F& e1 f/ _- l
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。7 g( U% [- a1 U! ~" s) W7 k

  x: A8 P" c, h0 r2 m0 B#### 标准化的公式
: c# X& k1 z9 Z: \7 e! K- H. N* d, r! b  ^
对于一个数据集 \(X\),其标准化的公式为:
, |! w" g$ {" {( }/ K+ s\[* f, l& J4 e  H  R: B* [( T7 `
Z = \frac{X - \mu}{\sigma}+ K% S$ |% A% g
\]
# c5 x2 H7 C6 t8 I9 N5 @! {4 M; A: ^其中:8 b6 S' U- y  s8 [$ @9 J8 I
- \(Z\) 是标准化后的值。7 s/ P# F3 h: m* N; H- T3 G8 T
- \(X\) 是原始数据值。
; B0 y  C( H) d9 O. W- \(\mu\) 是数据的均值。2 L7 d2 {& y- E+ v& f$ d1 V
- \(\sigma\) 是数据的标准差。
, [3 P" [+ k" O, Z6 a: X. A- z  ~- o5 r3 |  Y7 M
#### 标准化的特点
8 a& R) F- F+ _
  m4 T4 K7 O7 N; I! n- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。0 p0 v4 G8 Q& G/ f& o4 p  v  Y
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
0 w4 q' N; w* E5 E: `6 r- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
% R: ~/ g3 I- Z2 }6 o; K2 s5 A8 M! T  M
### 2. 归一化(Normalization)3 @3 b4 {6 v* A4 H% s( x
, e/ M$ D8 b" Z4 x$ a+ z- G5 K
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
* s9 o7 s* ?+ ?4 P1 C( x$ R3 }& H' P! m
#### 归一化的公式! n. E& ?" i! A# y. i
. V8 h7 d% r' p
对于一个数据集 \(X\),其归一化的公式为:
4 g6 m- p0 a* P  T! q+ U4 D\[/ Y8 o3 W) {( _/ Z
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}1 a2 {  W0 \! `0 A3 p9 i: w" j
\]
4 \  A# ?* y3 y) w9 N( a或者对于[-1, 1]范围的归一化:" C1 S4 r: K1 W# M2 l4 A% f
\[
6 C; W$ p4 ?. O# k; n) c- P1 bX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1; @% `4 T9 I  M( U" U
\]
: F+ {9 g  m4 Z  H$ U2 D其中:5 o+ |* k  W: B5 U  \" c' `2 Q
- \(X'\) 是归一化后的值。4 q/ l) M' C( }+ f$ z
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。  W; ~5 T+ Z2 U8 k

0 W% W7 G( P& O2 M9 ?. H#### 归一化的特点
5 a& k' x. ^! `* p* {0 z* ?) Q. Y5 ~
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。" j. H' [  n; S. S& V
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
  Q7 u5 @$ A; c3 {- Y- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
5 n& D% C8 r; X
  K) f) U( V% R3 z8 L### 3. 标准化与归一化的区别2 W6 M# k8 \& O) Q( m8 Q( j

5 [- W9 o' O7 O  K| 特征          | 标准化                      | 归一化                      |# l! E$ {2 Q  v
|---------------|-----------------------------|-----------------------------|
7 D) @3 ?/ s& I) J( P| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |: I. N$ E, k. E1 m, p4 N+ g" y& h
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |/ h- v& |2 b2 Q7 I% j9 W. z" Q2 s
| 对异常值敏感  | 是                          | 是                          |
- {/ R7 a. v! A* j| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |* r( ^) J4 f5 _
( e1 t* E8 I, k7 E) z
### 4. 在时间序列中的应用
" b' R! H1 c2 q9 C4 r5 `$ x! Q3 `- J+ {' q
在时间序列分析中,标准化和归一化可以用于以下几个方面:
# a+ \5 q9 x/ O
  i4 O7 ^* W0 C  Z- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
% C; d" `% P  x1 @" K( j- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。' x+ w$ a7 `- B+ C4 Z5 B
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
5 A5 h; u$ D; P5 @9 m$ \0 v! P
0 @$ \7 f$ ]* M: a8 J- E### 总结. t0 M3 K9 t7 i' l( x" j
" }% O8 X4 G& D4 a3 D1 I+ F* g
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。' N- N, Z% d' i0 g9 Q

# U/ K9 T+ Q8 x3 _6 R; ^: y, l+ H; x4 P. b7 J% |% j
# x" v- o6 k1 F' l% w

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-8-6 02:17 , Processed in 0.430121 second(s), 56 queries .

回顶部