QQ登录

只需要一步,快速开始

 注册地址  找回密码
查看: 1380|回复: 0
打印 上一主题 下一主题

时间序列中的标准和归一化

[复制链接]
字体大小: 正常 放大

1176

主题

4

听众

2887

积分

该用户从未签到

跳转到指定楼层
1#
发表于 2024-9-20 16:35 |只看该作者 |倒序浏览
|招呼Ta 关注Ta
在时间序列分析中,标准化(Standardization)和归一化(Normalization)是两种常用的数据预处理技术,旨在提高模型的性能和稳定性。它们通过调整数据的范围和分布,使得不同特征之间具有可比性,尤其在使用机器学习算法时尤为重要。
/ _: C  T( M* \9 y- l; k8 K- Q+ |2 j
9 w# l- v1 p  r+ \, m: M9 c### 1. 标准化(Standardization)
# W& F& I& o' F) N. R: O; B2 m
. k* r- v3 F2 b7 M2 }9 ]! m1 \标准化是将数据转换为均值为0,标准差为1的分布。通过标准化,可以消除不同特征之间的量纲影响,使得数据在同一尺度上进行比较。" `0 {& [, ]# E

- a! I; i- z  Y  ~0 X  Z* ~* s#### 标准化的公式. L% R" I# @+ d* z+ M  A2 u$ F1 Z  a

: E4 L/ \$ [, E) y; z对于一个数据集 \(X\),其标准化的公式为:+ T! |: i5 f" r. r) _" F
\[# |8 F& b6 ]- M: a
Z = \frac{X - \mu}{\sigma}
0 S) o3 Z5 e* K* W/ {\]0 E5 O- Q7 F1 F' ^; H5 c4 X
其中:7 `! Y% Q: |" N+ g8 Q3 j
- \(Z\) 是标准化后的值。
* P* U9 p4 ~& \, C4 J6 T! X$ V- \(X\) 是原始数据值。
6 R% F2 b$ o. e% u3 m; W  c- \(\mu\) 是数据的均值。$ {8 P1 a# {" R9 J! N0 M( ~. e
- \(\sigma\) 是数据的标准差。
( C" z0 g- u/ f3 Z) y/ F. v( E
( O, d* [( |/ E( B  [' _5 J# R. l#### 标准化的特点
& x$ e9 ^* M0 L, h# m7 b4 H; G5 ~4 }- n1 p8 x
- **适用场景**:适合于数据呈现正态分布或近似正态分布的情况。2 n. E" g% p4 d4 B" |  ?- N7 l
- **平衡特征**:通过消除均值和标准差的影响,使得不同特征在同一尺度上进行比较。3 i! g" ^% K8 s# z
- **对异常值敏感**:标准化对异常值敏感,异常值会影响均值和标准差的计算。! f, O6 p2 U7 t$ B4 x0 V
/ r/ Z% t6 T* ?6 G! o" D' k
### 2. 归一化(Normalization)- D+ Y6 N9 L4 D" S

/ |+ H4 l, J& D% p: P0 U6 N归一化是将数据缩放到一个特定的范围,通常是[0, 1]或[-1, 1]。归一化可以使得不同特征具有相同的尺度,尤其在特征值的范围差异较大时。3 H2 @2 O3 [+ l
5 x3 I. |& n+ w
#### 归一化的公式
8 Y4 B) r  {, V: c% `. T5 u6 @+ d1 g9 @1 h' F
对于一个数据集 \(X\),其归一化的公式为:
6 H' G0 y2 j* v\[8 _2 |% ?. O% I+ Q; M
X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}& }% T5 s: _+ ]. M
\]
% D! ~$ n; c+ }) w; a或者对于[-1, 1]范围的归一化:
2 ?6 B! ~, p6 a7 R4 M\[  J1 h# A/ ?5 w) p1 v# v6 @6 o
X' = \frac{2(X - \text{min}(X))}{\text{max}(X) - \text{min}(X)} - 1" F/ d, ?+ L0 @) a" m" c
\]0 c. t# L2 `: E0 v; a+ i
其中:1 A1 G0 @- ]% a! l9 T) ?. s' x
- \(X'\) 是归一化后的值。# _) |4 y1 O1 W0 p0 ?) K1 R5 ~
- \(\text{min}(X)\) 和 \(\text{max}(X)\) 分别是数据集中的最小值和最大值。
# {+ L; ~' q0 M
% z7 A* d# {0 h+ P" l1 `4 Q7 K#### 归一化的特点! ?( i# w& {, }- _- W+ V- M- i2 ~% z
" O* p0 v, M0 I
- **适用场景**:适合于数据没有明显的正态分布,并且特征值范围差异较大的情况。
4 ~8 J2 E2 G* c6 e2 x  [$ P- **消除量纲**:通过将数据缩放到相同的范围,消除特征之间的量纲影响。4 @$ Y1 d3 Q0 q8 ?5 s0 I
- **对异常值敏感**:归一化也对异常值敏感,异常值会影响最小值和最大值的计算。
5 `9 M* [3 x* k/ G, I; n- v& B% {
### 3. 标准化与归一化的区别
7 s. B; b8 `3 }- x# G$ S0 D8 ?" X: j$ m
| 特征          | 标准化                      | 归一化                      |& Q+ P0 _9 T; N2 J" t/ ~, \
|---------------|-----------------------------|-----------------------------|
6 F1 D) l1 p6 n" e% P' \0 [: L| 目标          | 均值为0,标准差为1          | 缩放到特定范围(如[0, 1]) |
* |3 I) v3 l% O| 适用场景      | 数据近似正态分布           | 数据范围差异较大           |- }7 u7 U" n+ B2 K; }2 D* b. i
| 对异常值敏感  | 是                          | 是                          |
: m6 L3 N) c9 w5 `* y1 w) z: e| 公式          | \(Z = \frac{X - \mu}{\sigma}\) | \(X' = \frac{X - \text{min}(X)}{\text{max}(X) - \text{min}(X)}\) |
) v. J* a( Q, s$ T" d, K- T3 L. `9 }: T( L; d
### 4. 在时间序列中的应用4 s$ v! D% _! d9 ^* z

4 |# E5 Y3 ^+ r3 `: `/ Q在时间序列分析中,标准化和归一化可以用于以下几个方面:
9 `) d5 o' I" @# b! j( l+ [) Q) B) [4 m; Z6 _0 |& K7 T' ?
- **特征工程**:在构建特征时,标准化和归一化可以帮助提高模型的表现,尤其是在使用基于距离的算法(如KNN、SVM等)时。- J$ F/ c2 a  f
- **平稳性检验**:在进行平稳性检验时,标准化可以帮助消除数据的尺度影响,使得检验结果更为可靠。% N! ]$ Q4 w& n' E! T2 {
- **模型训练**:在训练机器学习模型时,标准化和归一化可以加速收敛,提高模型的训练效率。
; b" G5 p( \- F/ M4 y
0 ?) f4 g) ]' ^! T% x, t) o### 总结
6 c6 X+ a0 F: C2 ~
% a0 k3 C, N7 w标准化和归一化是时间序列数据预处理的重要步骤,能够提高模型的性能和稳定性。选择使用哪种方法取决于数据的特性和所使用的模型。了解这两者的区别和适用场景,可以帮助更好地进行时间序列分析和预测。4 D( r/ Y$ D, r! s6 |6 n3 A

" p! @, ?8 t+ B. ^1 z3 M+ c/ a9 T% {9 b5 Q
: ^. h# I( D/ }$ v2 I+ I# U

判断数据是否适用标准化.py

215 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

归一化.py

726 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

标准化.py

727 Bytes, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

daily-minimum-temperatures-in-me.csv

62.82 KB, 下载次数: 0, 下载积分: 体力 -2 点

售价: 1 点体力  [记录]  [购买]

zan
转播转播0 分享淘帖0 分享分享0 收藏收藏0 支持支持0 反对反对0 微信微信
您需要登录后才可以回帖 登录 | 注册地址

qq
收缩
  • 电话咨询

  • 04714969085
fastpost

关于我们| 联系我们| 诚征英才| 对外合作| 产品服务| QQ

手机版|Archiver| |繁體中文 手机客户端  

蒙公网安备 15010502000194号

Powered by Discuz! X2.5   © 2001-2013 数学建模网-数学中国 ( 蒙ICP备14002410号-3 蒙BBS备-0002号 )     论坛法律顾问:王兆丰

GMT+8, 2025-11-6 02:32 , Processed in 0.462402 second(s), 55 queries .

回顶部