- 在线时间
- 1630 小时
- 最后登录
- 2024-1-29
- 注册时间
- 2017-5-16
- 听众数
- 82
- 收听数
- 1
- 能力
- 120 分
- 体力
- 565602 点
- 威望
- 12 点
- 阅读权限
- 255
- 积分
- 174903
- 相册
- 1
- 日志
- 0
- 记录
- 0
- 帖子
- 5313
- 主题
- 5273
- 精华
- 3
- 分享
- 0
- 好友
- 163
TA的每日心情 | 开心 2021-8-11 17:59 |
|---|
签到天数: 17 天 [LV.4]偶尔看看III 网络挑战赛参赛者 网络挑战赛参赛者 - 自我介绍
- 本人女,毕业于内蒙古科技大学,担任文职专业,毕业专业英语。
 群组: 2018美赛大象算法课程 群组: 2018美赛护航培训课程 群组: 2019年 数学中国站长建 群组: 2019年数据分析师课程 群组: 2018年大象老师国赛优 |
三分类网络的物理意义是什么?# Z( G1 Z$ O# ]1 Z' X9 f
0 Q3 H( M, [% q) b" i/ ^
用分类实现衰变$ H! p. O' c! ~) Z
专栏收录该内容3 \: ~7 n/ P4 n# l
52 篇文章0 订阅9 ?/ E9 D9 ]+ ?. f7 M
订阅专栏, B$ j, m* m, j0 G
(A,B)---m*n*k---(1,0)(0,1)
" X& a& K8 N% x: `* G R4 e6 D& t8 \9 y4 H/ `
对于一个二分类网络可以将被分类的A和B分别理解为粒子和环境,因为粒子处于环境中。于是A和B之间的距离可以理解为0。因为t=s/v,则即便A和B之间的相互作用的速度小于光速,A和B之间仍然可以实现瞬时作用,并不违反理论。$ ^7 D4 }) g0 J% L, D2 A/ `" I
0 c1 _, f- x, R+ }5 j9 d
( A, B, C )---m*n*k---( 1, 0, 0 )( 0, 1, 0 )( 0, 0, 1 )
4 M4 @+ P& J5 Q# g4 U8 [$ r4 V( C! H% t. E1 m! i& e
对于一个三分类网络要完成3次形态的变换。A⇋B,A⇋C,B⇋C,每一次形态变换就是一次二分类,因此对于一个三分类网络可以理解为由3个二分类网络组成3 ?/ `9 D; y4 X
. ?' d7 E+ s% O/ Q(A,B)---m*n*k---(1,0)(0,1)
: f5 d; m5 F+ T8 t+ |& }' a8 x2 |6 g L& }
(A,C)---m*n*k---(1,0)(0,1)
0 y- y! w1 X* M/ K @: x6 W
( F. A% G8 f2 G6 e8 Y* R# m/ l(B,C)---m*n*k---(1,0)(0,1)5 S* o' ]" I0 H$ E
1 T5 h) _0 M: r ^. ? 这就意味着存在3对瞬时作用,也就表明这3个粒子彼此之间的距离都是0.随着时间的推移网络的收敛误差会不断减小,而网络的分类准确率会不断变大。这个过程意味着A被错误的分成B和C的成分少了,同样B被错误的分成A和C,C被错误的分成A和B的成分也少了。
5 J$ |; l+ F) l9 b: {% @
) d! k2 c& |0 z3 h% }/ Q所以这个三分网络可以被解释为,3个距离为0的粒子不断的相互作用,随着时间的演化,最终变得越来越像自己。& p% O/ F/ s4 W& F' V& k: |
1 {* n) p6 E6 W; _3 e" h而前面的实验表明相同收敛误差下,迭代次数取决于等位点差的绝对值的和,这次就继续验证这一猜测。
@" O+ ^) E/ F1 m1 i F! \" B( Q/ ~
用的训练集是mnist的0,1,2,3,4,的第一张图片。用间隔取点的办法化成13*13./ r/ |. z& F2 X8 N! D. r
1 u( T/ m4 d; X: I
( 0, 1, 2 )---169*30*3---( 1, 0, 0 )( 0, 1, 0 )( 0, 0, 1 )这个网络简记为0*1*2.就只有3张图片不断循环往复,直到收敛。共进行了10组得到数据, n- x3 @( p- O/ o( S0 @
" V8 \: a: s- p1 @" Y4 c1*3*46 G1 B3 P# r3 V \' ?
6 v, M& x- O3 w8 _$ T" E2*3*4
8 b; O- O# J7 J) U e6 M- @' ?0 {) t/ K- x* T3 j) R* P9 t0 `1 \
0*3*42 V# c9 C& R% y& j6 Q4 N
: S. ?& B3 v6 q' \1 ?0*1*40 P) u- ]7 i2 N2 y, m
! ^9 }) M8 q$ h A5 P( ?, H0*1*39 k4 Z4 W& T$ Y- `
) N, D6 ~ \: F6 L$ c, g" I1*2*4 Y* Z/ X2 x/ F1 b
5 Y7 v$ |% b7 Z. t& Q* O
1*2*3; y5 | S, d3 P4 g5 P R3 C/ a
; e( H5 R! _& A+ @
0*1*29 D: P5 M; G( R6 F- Q; {
: V, e8 W+ S' `, v+ G) I
0*2*3
% r) ^2 S, J5 l2 Y7 o1 E/ J, @/ I" V& n- d2 J
0*2*4
+ ^) k- m3 n( j8 j% j6 z% a: Q6 Q3 K% Q
δ
) A' ?# I3 q, R& d
& _% g( x9 t# m3 f, E- g0 [迭代次数n
0 D3 f7 w) M v" O# P
# C, Y$ M, o t" T+ Z9 L迭代次数n
& j9 V+ R- P: J/ G/ K5 s! ]: u
& r$ U; w% ?$ B6 a3 A# E: {迭代次数n* d% l! l Z! a3 |; J7 z. @& v
" B2 w$ \4 K7 P1 \- W0 F! g
迭代次数n: i# h2 {3 `2 B3 _0 T
* p& C5 H+ ?: u# }+ _. ^6 g* Q% s
迭代次数n
9 q1 U) h: O Z2 \, G. l1 O0 G1 n' @
迭代次数n
8 m; f7 o+ S4 p- ]& J4 f+ B8 ]; \4 L* ~; E* I# I
迭代次数n4 i$ A7 Q3 w" t) F, h$ k
5 A y( D! W/ i* F- j迭代次数n
% V( G* T: }2 `7 ^1 q2 V3 ~# i! R; j. P0 @
迭代次数n. ]; k& g/ M- J- Z1 z2 P
5 ?5 r" r* x* q; d迭代次数n
$ Z+ P+ k" F5 H* T( {7 l
6 S9 h6 s0 L2 {0.016 k, M- _: j9 m
) \0 d. l( C }# K1763.1809/ _( I* T$ `6 n1 s# |+ \
% M! N1 i) m* ^% Y- b! b
1626.5729/ l1 H. G+ K- t& l2 ^ \& f
' u; _6 M9 I4 Y* [, ?) M! q: m
1672.45239 u! \6 \0 s& t( y# p$ n
: @ [+ P: ~: F, T8 f' U& C
1635.9196$ P/ \* U o. v! Y9 e) C; }' B* _
, `# h% ~& o" Y: ]; Y" K' i
1596.70350 _7 y( J: s" s' M/ ]* W
1 m9 N* M* }6 O' Q
1620.407* \+ o3 C0 B8 q: D3 U
- R7 T Y! b& @0 a9 z: o1563.8945
6 x9 `# i1 d0 h8 @6 v: e/ X3 X9 U1 a# J9 I/ M5 Z- U
1444.2915+ g; a& O$ f B, t8 k7 @3 X: A
$ c+ Z+ q2 P# o+ |; @" y0 h# Q
1410.03029 w3 j9 d: L" Z( t7 M* R
; b n3 S- V- Q% B8 ]" }
1465.4171
5 D6 ~' E8 n( G) I) P6 B, _% y7 B; c4 S% E7 M1 w) y& R Q- y
0.001
( h$ ?# j# j7 ?( U( k1 Y5 M& N: c( D* P: ?
13065.1967 p# s5 F0 C- J0 ~
; O4 f; T& A9 x* j# F5 G12674.945: t C R$ U6 e2 d! c0 K
3 T0 F) \) Q/ O
12747.729
6 F1 p y3 B! I8 O
* o$ }, [. F& c0 Q6 K: `0 { n* `8 b. S12386.216( ?( `" \( z9 F% P) F
$ \' _" k, e- x
12349.02
! Z+ u4 D2 O" F* g b/ p, ~" g h" u& L, [3 W
12282.201
# |% H$ [1 y1 T" ~( B3 Q
9 z6 [8 H, j( P* g1 P12270.035
' p0 c& }: I8 z9 Y
3 B% }2 I5 J+ l- J11338.477
3 k& }/ X( z( c8 p* N/ U( J6 D8 ?; b( d5 ~5 g4 E5 d# ?- Z* C- B3 R" D
10985.2019 x9 l# B/ v" R) u4 H. _0 F
; F: D$ V1 q v! X1 {* u2 B11015.5031 Q; X/ d$ H/ }' E
$ a5 ~* o: B7 W* e2 g' a
9.00E-04
- ?, ]* E! s5 N6 M, C. j
% Y, W" q2 Q8 `$ b14352.452" j8 t4 g; ]1 S) C7 _- L& _2 p% D
" n% ?$ b- d0 I$ A: G* ]* p
14004.633+ _2 S2 {, I0 `7 O. o; b; \7 r
. X. ]) Z0 Q# q
14062.829
& C& c' o9 Z# e' @
6 G$ G0 H# D5 R8 J8 }0 I13629.467$ Q3 E6 Z8 v- {! {
& f0 ~& H9 U8 P% A1 M* ]13613.3624 q. y& Z5 P1 V4 c+ m, D
. }4 n( ?6 y; o0 O- C1 x8 g t
13609.563
1 Z: a% n( Z6 k) i1 }; E& j- r
E. q" w$ l }0 W" I) F$ k13530.3229 o; Z+ v# i K
9 n' F! r' x/ i/ B5 ~
12458.171
# u+ _. v3 D4 a" Z
( M R- z% |6 [% o5 o. K9 H12176.362
2 R, T# f) i) I+ Q1 `7 r6 y- f
k7 }( T1 o# u12225.966 P1 f' G: S" Y: V i& e6 l: @
9 O5 M1 ~) h y& h% _8.00E-04; |% K9 K$ j, t! M: x7 X0 a7 |
# I" r7 \6 t) |; ?& Q7 f16141.2061 a+ \4 V# B. n5 I- D E
% L' l! }* B: t1 Z15611.101
! h+ H* b7 i; M: a: f! E1 m6 x: e, F! l- x& Z+ E
15749.91
' w% m( F" O4 e1 [$ Z* \9 r1 [+ r" J# z, w
15264.98* B8 `% G1 @" @: Z- J9 ]
" R8 t9 `: m- `2 }. H$ E: z
15228.447/ J: Y4 n" r0 r
8 c6 ?2 \6 T# q- v15207.6286 S/ ^. X; j0 a `( B% w+ l/ |+ A# x
: I+ S% o; f) {% K& `15053.7147 l2 \% ^/ `: A+ @/ c( q' n: I
* X+ l# [# f0 V, N0 K14044.729+ w0 l4 `8 K; |1 j$ k. W. J; N
+ o% X2 P) b8 F K8 u+ q13530.3972 w7 z5 g2 J) R4 M7 W, V" H0 a
( I( m+ ~' h) k
13654.678$ [, ~8 X' P) p5 f8 T% b6 U9 @
. _( e7 y- E: ~" c0 Z3 w
7.00E-04
3 o: ?( Z! W1 U) d0 e0 P6 @" [) H/ g0 ^. x! X( |/ F: ^4 c
18194.397
0 L3 \& E9 E$ a) {, `) L
4 W: N6 C d+ \. ]17760.638
) S, b1 _0 s- J9 |9 U& q5 E; V* M& ]+ a0 q& \- v- r
17743.578
0 F# `7 r( _5 X e" e
1 Z! ]' \% w' w5 L: t- k6 P, T17333.377% y# n4 f9 J) [9 i! n% Q1 R
3 e1 Y0 G( H1 r8 {17293.874
$ M) d6 r3 z1 {! Z1 r+ ~. Z' P' x) p* n% A! S+ a, W
17204.638( k5 T1 {' R% Q7 x# l
% w( a; N' P; {9 `17058.809. v, S% ^4 k$ u1 z7 `
5 \& Q# [2 d# K% _ U
15946.101
( V2 O6 S2 T2 e4 k, `! V% K' m
2 ~9 I j/ R' }, ` |6 v0 z& C15491.266
( Q0 l+ _7 `6 y2 z t% l: K+ K1 _+ M0 t
15399.5384 Y& x1 h& I5 q4 M
0 p# h3 Z8 o' K& g# g
s, a9 P9 d. z8 ^3 U. l9 j
* c# W# n1 l0 L% E7 h* i1309 I' F `, b+ m' a$ i# {0 b* R6 F
/ e$ A( F0 _0 t: m/ {" m+ f1 g218
2 q q* ` v% m6 J
: n( |* m8 G( m z4 K8 B. x5 w198
4 K* I- b# p+ {% J0 T) }' s+ K8 b. C
206
% c$ i& n- t. A- e$ B3 \4 z- X$ B/ |4 G
204" i# U, c2 E( w" S
) d$ {7 q t4 F9 e+ G" v# _% ]218
- h, }: t! s7 u" N( y
( o6 G' B- {5 }" H220( t7 }5 e7 i( i; l+ q% x$ s' w# `* i
- c1 _& Y" U0 m9 a" C% W r! @204
8 b) l- K) E: R# q" l$ s6 N! U) o4 ~: Z
220$ D+ Q, X, S$ O0 F; _: O& u, j
( W# P* S* o% l* b216$ b; j# }- z' m% h- ]7 x7 v
4 |+ z) S4 D. ?4 t; d# f1 s将收敛误差为7e-4的迭代次数画成图
& S' R" @* C: H- S" C$ r; ], E
. T: |! f/ o+ Y2 T1 l' l
6 v2 m7 G7 G* q) l! ^, T2 G' S
; ?2 m" k c" |+ h再将移位距离S的曲线画成图
, ~. H. g, [# d; o3 j! o, R9 q& i" J8 l
5 g2 V7 \1 O1 {0 r- `' i- m; M0 n# T: x9 R
在这组数据中s和n之间的反比关系依然存在。. x: I9 @7 _6 @& T( U. x
6 k* g& K# ]8 P7 V
移位距离假设
4 o3 {3 U9 ~& A: a; \( p- M' N
(A,B)---m*n*k---(1,0)(0,1)
: }0 t# i& n) f x
4 U4 s) s& b7 a* B; l$ z3 ^
' Q: m, f1 G5 W5 |# Y, ?$ K$ W5 N8 D- q, @
用神经网络分类A和B,把参与分类的A和B中的数字看作是组成A和B的粒子,分类的过程就是让A和B中的粒子互相交换位置,寻找最短移位路径的过程。而熵H与最短移位距离S成正比,迭代次数n与S成反比。
) H* d# ^6 }1 {* {1 _/ ]$ k1 t6 j2 j/ m
移位规则汇总. _/ t4 V$ J0 S5 _
( q6 u# W0 q o! U8 b4 }9 Y移位距离就是等位点数值差的绝对值的和S=Σ|a-b|,如果训练集有多张图片取平均值,如果是多分类问题则移位距离为所有两两组合移位距离的和。2 G# ~& I0 m; d Z
% J% F/ L0 T* q9 Y G" C( i如对一组3*3的矩阵
, _: ?% _. J, h' I4 ]/ C1 W6 ^: i7 D: e4 _3 U2 d1 ]0 P
6 ~7 w. p/ o7 ?7 Z
+ f( s1 i/ Q) Q% ?9 Q7 v/ V( I/ DS=s0+s1+,…,+s8=|a0-b0|+|a1-b1|+,…,+|a8-b8|1 p, [9 [$ X. a7 d3 [& F8 u
3 Q8 q+ t4 m, P如果是3分类问题,就应该实现3个形态之间的两两分类,也就是要完成3对等位点之间的差。
7 y2 z! d$ W' }; D* q% O5 I2 _
3 X$ E1 H* T2 h1 @" s3 h9 Z
( d' Y" T( e9 M( W# T) x0 l+ ^9 r2 c R0 Q+ v9 q
因此移位距离# R2 g0 h0 u1 x4 k3 z
1 `3 Q1 z* ~/ ?" g
S=Sab+Sac+Sbc=- F4 x' Q& a* b2 T- R" x
' z# N# ~* F9 t/ v6 {
|a0-b0|+|a1-b1|+|a2-b2|+|a3-b3|+
- g& \' h5 r2 t& `6 }0 H0 g4 f0 E7 t$ r+ _
|a0-c0|+|a1-c1|+|a2-c2|+|a3-c3|+
0 P$ k( k0 Y/ @8 i( L) {' m2 O! s$ ~( C" i+ _9 X
|b0-c0|+|b1-c1|+|b2-c2|+|b3-c3|, x5 \' ~- z1 r: ^& }2 `
————————————————6 @ {1 D: q/ X" W+ _# E5 \+ D2 w
版权声明:本文为CSDN博主「黑榆」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
, w, L C% [! D' j0 g6 }4 w原文链接:https://blog.csdn.net/georgesale/article/details/126690670
2 B. j% n. K% T6 I# m# g
# t y0 k8 o3 z
) \& a* o5 A# c) P$ x, z |
zan
|