QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1945|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1189

主题

4

听众

2934

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
. |* z) T% @$ A6 g, E3 A* K" X8 I# S/ v6 ~6 Q# q# S
### 1. 标准化(Standardization)
; D  l9 n5 i7 K; g% j; I$ K5 V) U7 Z, M! k7 E" E% b$ V5 u  t
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。) z9 q" t% w  z; Y! e% C4 O

+ R* q- c- n- p& O- ]6 B#### 标准化的公式
* S8 e" e2 w! r2 _/ s- D/ u( P
. d: m8 {" x- [. J, }  ?5 z对于一个数据集 \(X\),其标准化的公式为:
  m9 B7 U/ D9 M# V7 ~\[
& z4 r  K. p3 N: U# NZ = \frac{X - \mu}{\sigma}
5 H- L7 L4 l4 {\]
- Y: V4 d% z2 s其中:5 M: F9 N; v$ V1 L4 a8 t
- \(Z\) 是标准化后的值。
7 b/ q$ V+ D6 ^! Q7 t- \(X\) 是原始数据值。
8 j3 {8 ^/ J1 Q4 X0 V- \(\mu\) 是数据的均值。2 O) Y& M5 a  ]4 o2 J9 Z1 N. z
- \(\sigma\) 是数据的标准差。
, h- d7 }8 ~+ m. b8 U4 R; b4 U! |* d+ O. \) j# W" d- I1 q
#### 标准化的特点
) a" ^' H( J6 p8 M2 c( a4 i, A1 Y& {! A" u4 W8 d# H
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
" V+ K: U7 |# B1 Y& `- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
" n% ~5 D8 z" P" `! k3 o/ Y2 a- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
) ^7 `$ x! ~, i8 L8 A3 S" g" O7 A: _% a2 R1 w/ p& _7 L
### 2. 归一化(Normalization)
' ?  P- \" m$ _# f  w4 k" N) j, K! I& p
归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
& m" g0 @# ]; g7 A3 B; ?* ?3 _# }( l% o8 w( V9 f
#### 归一化的公式
# p, R& ?% G% C0 V# S9 M8 k$ j5 ~( Q1 H" B
对于一个数据集 \(X\),其归一化的公式为:
' L+ ?6 P" f  w' g/ D: |\[8 r0 y. K9 x# ~7 g' k
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}; g& h& @7 M# w( {* C9 i) Y* K
\]
7 K. r7 X3 f+ r; I5 g2 z; q或者对于[-1, 1]范围的归一化:
4 x, m/ I: n3 w: Q  T3 I) g\[1 X. H, V0 l1 i; l- G( w4 |
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1! ]- Z  S3 \# f
\]
% M9 d& R! f+ c. t2 T其中:
+ B: R. W+ W& v6 _# x. R- \(X'\) 是归一化后的值。
5 a+ ?% a' A! W. S- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。/ X, y( V3 ?+ {1 t, x8 s& v- K$ _

0 ^) P' ^  w7 d. C; q* l#### 归一化的特点
7 c% q, H/ u0 a1 @) p) l3 b; g9 h' O
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。+ b* n- ~/ ]9 C( L# Q
- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。* c0 D0 g' L! V( f6 E0 y
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
( k3 _$ `0 b) H* b0 r" ?0 t7 e# c  \( R( {& Z; T$ d; |- I; O
### 3. 标准化与归一化的区别% B5 Y& `* s2 I

, V# u$ B5 c2 P! `- X| 特征          | 标准化                      | 归一化                      |
6 w  m6 J' H; k% A) m! F|---------------|-----------------------------|-----------------------------|
0 X' P3 L. w5 F( Z2 D/ h| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
2 M3 L) i; n/ a) R| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |
, {9 l1 o# }/ D, F| 对异常值敏感  | 是                          | 是                          |, s$ W: B* O2 C+ o2 Q
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
" H8 g: q/ G* s; F" |
/ g* c$ J  E3 T) j* x/ @8 S### 4. 在时间序列中的应用
3 X& M+ o+ j/ S, \1 i6 |" h1 U. b) l. A. g- l: t1 Z
在时间序列分析中,标准化和归一化可以用于以下几个方面:$ E. f1 ?* e. l( U" y& z& K2 \: Z

8 D8 J/ U9 K0 F- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。) @+ R9 z6 E7 y9 V2 I2 Z
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
4 ]6 y- ?7 w1 N- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。; A" v& Y/ k3 p1 U. @5 z
" p; O0 D) j% N8 e0 F' F; k0 [
### 总结
* z9 u) c9 a6 a, x
0 k+ \; a% ]2 P/ y4 Y标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
) o1 n/ f2 }7 a' z
& q1 R2 w; M- ~3 ]' M/ ]* E% l
$ c! M/ J8 X/ ^+ V3 S/ _( T$ G- b$ v5 l- M

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-7-28 05:52 , Processed in 0.456544 second(s), 54 queries .

回顶部