QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1827|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1186

主题

4

听众

2922

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。" T$ x9 n! D( F0 c; X7 V0 o; d
7 N/ Z4 g% L1 T2 E5 H$ \) o
### 1. 标准化(Standardization)$ o* ?9 O- y! {7 g" C
4 H) u1 K, D" b, k# z+ h
标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
+ d  T6 d( B! {! z* s
) Y, L4 F" l' B/ ~: s& H, M5 `. v#### 标准化的公式
4 u7 s$ I9 v9 K  y
" M: Z; X6 @% S% h1 l对于一个数据集 \(X\),其标准化的公式为:# ~3 V- S5 p! J( a7 P7 X8 [
\[
" N' A9 j# d" u! RZ = \frac{X - \mu}{\sigma}' |! ]- k7 }7 x5 i
\]1 Z+ a4 j: G# ?  i5 [
其中:* ^  x1 S. q' |- A
- \(Z\) 是标准化后的值。
) g5 ?, O; T" m% u8 h- \(X\) 是原始数据值。( _/ x7 Z5 y  L/ p$ _
- \(\mu\) 是数据的均值。. H" d- r. p9 w' z; B
- \(\sigma\) 是数据的标准差。$ B1 A6 k1 h0 Q5 D
7 U$ O- ?4 A% U& l( C3 X
#### 标准化的特点
  c* N7 n) s& W0 J: ], ]  g$ O
  v2 d2 w" \* ~& J8 x: Z3 L9 i# t$ b3 Q- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。
8 }, q) C/ L, B: m6 @8 l: S- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
8 P& h7 ]; a! z* @9 n- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。8 X! Q/ K6 Y% W8 J6 \
- g/ i5 O& }( O9 W
### 2. 归一化(Normalization)# p  Q, I9 I: S  n8 `2 `5 v$ L5 Z

# T& U4 x6 M/ ]% M2 A; d" d0 Y. g. x归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。. X" F8 ?# C' F" F; @

' s! [( E4 G% a& z9 l#### 归一化的公式
0 F+ W0 b! }0 \1 ~. K* s  H& k/ C; G% r/ E& g# h
对于一个数据集 \(X\),其归一化的公式为:8 Z1 N6 Z9 F* }8 F
\[0 N" c+ M$ [5 [. w7 q/ B
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}
- o/ Q! x7 S; V1 W. U& O  w\]
6 z( K7 @$ U8 K7 A8 w: R  X或者对于[-1, 1]范围的归一化:
3 I0 I- i0 `& T% B\[
6 ?1 ~2 E# D: eX' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1
1 p1 Z- g& s$ ]1 p* ~& g\]
. d; {% n% A+ S% X2 N. ~: i3 J其中:& a% Z1 H: Z1 ?& A
- \(X'\) 是归一化后的值。; ]$ U' a8 m$ c+ q2 B% k. t& Z
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
+ q' r" f& n8 {) P0 V8 t
2 \8 _7 h% M7 T) _* n#### 归一化的特点) ^3 u+ [+ {! c% s
! S$ t3 n! V5 Z; o! p- d9 X
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
' b, z. }) o9 v3 U/ v5 }2 }- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。
; T, `1 X3 W! J2 G5 B) k" y1 m- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
% b  u0 T  s, i
) a. z* J4 B. B4 D### 3. 标准化与归一化的区别
3 c. _8 }" I3 H2 |- R
6 ?3 I' O- w9 M$ C# X| 特征          | 标准化                      | 归一化                      |
/ L, i' K4 C; m# `|---------------|-----------------------------|-----------------------------|
, E% Q2 W! v1 ?! ^7 _4 S| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
+ F: T' X& L) Z0 U: c# B$ k7 E| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |$ H1 ^. y$ ?# p6 q
| 对异常值敏感  | 是                          | 是                          |9 H' ~$ E- H: c/ [+ C* C
| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
0 q! j; A5 l& d5 R& ~8 `5 A, \, B! S8 }. t* A
### 4. 在时间序列中的应用1 a' H/ ~' ]0 V& D1 U) S5 y8 y
" @4 @; V3 g) I/ H) c
在时间序列分析中,标准化和归一化可以用于以下几个方面:. _! V4 S: b6 l$ c, _& ?6 M

5 y4 w* ^5 d) ]7 F6 G% v7 B7 M- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。" H/ B. D6 K7 b& E* k6 k3 L
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。
$ }" M0 M- ]6 T$ A9 n- ^5 r- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。% Q, E1 P, `7 q0 F4 d) }6 E

9 d# h: p! C* U" a4 W### 总结7 w( k+ e( |) z- Z. O5 G& E  A
" m$ Q* w5 }) E& P4 f
标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。
- Q, e5 v, n- a) ]# t4 o
: H' h+ c7 }/ L; t" G/ _
0 ~% i) f1 W1 m" S7 Y( v8 ^
! N& C1 f' a6 ^

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2026-4-10 18:40 , Processed in 0.282580 second(s), 55 queries .

回顶部