QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1100|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1175

主题

4

听众

2842

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
- Q9 l8 }2 V* c  @
) L+ S( Q  o8 }+ L# J4 F### 1. 标准化(Standardization)
% L0 s3 I& Q% G5 [* ^
3 Y; S: {' J! s4 f- s标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。
& i( Z' }! `9 _- ^5 i7 Y4 m- m; @0 |& n  U0 ?
#### 标准化的公式
% T) s4 c# r0 U0 f! u; ?5 y1 S. t0 s( b3 P/ K$ f: a& E8 G  q7 L
对于一个数据集 \(X\),其标准化的公式为:
2 g5 S# h" x* ?! m3 p\[
0 }0 B4 t; x$ W: WZ = \frac{X - \mu}{\sigma}& p; e5 X1 @# U; |$ }& R. B0 \$ [
\]* ?( {2 x/ f4 q! N; A
其中:% C9 J' V; c: n/ U9 n5 ^
- \(Z\) 是标准化后的值。# e  T! R( n" n& a  |
- \(X\) 是原始数据值。
1 W7 b& m2 `% g2 P4 M3 `( \5 z+ J- \(\mu\) 是数据的均值。" c5 m5 k1 J* W2 y' c6 {
- \(\sigma\) 是数据的标准差。
8 f9 }8 Y7 n; T. p6 t; U4 @6 y) w
% m% ~9 P% s& C) d0 {3 J4 R' x#### 标准化的特点9 h  U# ?% g$ S

- V0 _! |7 O+ n- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。+ Y$ y3 _9 g/ U8 V4 Z! O
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。
) ?8 k, ?) T$ P! X) q$ j6 t9 i- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。
& r5 B  b  E/ D7 X+ [2 d$ i* S! [2 b: A5 ~  V/ m0 p
### 2. 归一化(Normalization)
& R0 F+ u) \. f7 B8 G# s/ D
1 d1 P2 j6 D) o3 L归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。
7 z2 W# E9 T+ C% C* X) I& n  W) u8 W0 l. P/ Q
#### 归一化的公式9 y, U, M6 P0 _3 \
) t. f3 D5 q8 l9 A6 S, ^0 z  i( r
对于一个数据集 \(X\),其归一化的公式为:- O0 A" x* M# a! J3 J
\[
* J" R( x  ?( S9 mX' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}! P' p8 `' B6 y. }8 l& x7 X" S$ D
\]1 l- i  p4 B( H- A2 C1 G$ C$ {
或者对于[-1, 1]范围的归一化:
# l; w, N; Y6 U; Q7 `\[; f& a. ^+ h  m
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1$ s: B$ j( ?; Z! N
\]
( L# ~) A5 }, u* F其中:# _' q) Z9 `1 w( m$ @
- \(X'\) 是归一化后的值。
0 N8 B6 Z" o& s* t& G- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。' r: \9 m! }1 h+ C# m

* }; @% N9 n' |7 f& G/ q* T#### 归一化的特点# f! t/ u! f6 U  u. P. |% v! V

. f6 s4 p* u  P+ K- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
. |4 R& l, \2 I9 C# i- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。2 z& L2 X+ R! H; X
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。+ k7 G- o# R* k

2 j* S- `( l3 \- E8 b4 u### 3. 标准化与归一化的区别
8 @1 n$ p% v. m4 A' C# d3 l9 ]2 x+ A5 p: J! u
| 特征          | 标准化                      | 归一化                      |6 c% T, n' s+ }
|---------------|-----------------------------|-----------------------------|. r0 ?: f7 k' q& G1 o" b
| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |' O: t+ g8 ~/ y; |
| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |% n5 B$ T* Y* e/ o2 D& {3 k
| 对异常值敏感  | 是                          | 是                          |
  D8 S% K  K+ W| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
- d% f$ ^% n) p3 u
: ?* v& S! L4 T, f. c### 4. 在时间序列中的应用
' a4 \+ W; \/ _0 }3 G  _2 w
9 c) y5 C, N' v! P9 b7 O/ U3 j在时间序列分析中,标准化和归一化可以用于以下几个方面:
: A  t* ?6 G5 A0 G7 t2 t2 P7 V; V* }- ^% d* L# V& |3 ?- x
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。
3 t$ r. F* p/ |- _4 }3 \. @$ C. h- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。/ d- K. ]% q! q/ m
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。3 C% s  Z4 X5 V6 J1 I* X9 [
) Y+ a' X" A* W' \+ W
### 总结& d5 F* W7 V+ f  E3 D

5 S9 {% Z0 p8 s+ G+ k" W8 f0 P! j标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。1 w1 p' [9 X5 D% N
9 b) D" k% |) y5 f: K

+ U5 |) T+ \' h7 t% m
- O6 w) }! _& {% q8 [: x2 w

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-7-27 12:10 , Processed in 0.504376 second(s), 55 queries .

回顶部