- 在线时间
- 1630 小时
- 最后登录
- 2024-1-29
- 注册时间
- 2017-5-16
- 听众数
- 82
- 收听数
- 1
- 能力
- 120 分
- 体力
- 569615 点
- 威望
- 12 点
- 阅读权限
- 255
- 积分
- 176107
- 相册
- 1
- 日志
- 0
- 记录
- 0
- 帖子
- 5313
- 主题
- 5273
- 精华
- 3
- 分享
- 0
- 好友
- 163
TA的每日心情 | 开心 2021-8-11 17:59 |
|---|
签到天数: 17 天 [LV.4]偶尔看看III 网络挑战赛参赛者 网络挑战赛参赛者 - 自我介绍
- 本人女,毕业于内蒙古科技大学,担任文职专业,毕业专业英语。
 群组: 2018美赛大象算法课程 群组: 2018美赛护航培训课程 群组: 2019年 数学中国站长建 群组: 2019年数据分析师课程 群组: 2018年大象老师国赛优 |
三分类网络的物理意义是什么?8 ]0 ] ^6 ~$ m2 o+ b) i
- ?6 J! X- u' o1 d6 Z用分类实现衰变) J: a4 E( A- o4 a
专栏收录该内容
# P% \, s! j9 H+ m52 篇文章0 订阅0 k8 q; I8 w7 T w' m% K8 y
订阅专栏- C0 b1 \3 @$ U; U* m7 Q/ E
(A,B)---m*n*k---(1,0)(0,1)
! h: A9 J3 S: F0 K# H! G* [$ g e, k. M! `+ M
对于一个二分类网络可以将被分类的A和B分别理解为粒子和环境,因为粒子处于环境中。于是A和B之间的距离可以理解为0。因为t=s/v,则即便A和B之间的相互作用的速度小于光速,A和B之间仍然可以实现瞬时作用,并不违反理论。' S1 A- `) a6 `! l6 ?
/ S8 @ `3 _: U
( A, B, C )---m*n*k---( 1, 0, 0 )( 0, 1, 0 )( 0, 0, 1 )0 m7 g. T" Q8 \" v8 P
: m- @1 T% s. B5 q5 }对于一个三分类网络要完成3次形态的变换。A⇋B,A⇋C,B⇋C,每一次形态变换就是一次二分类,因此对于一个三分类网络可以理解为由3个二分类网络组成2 ^' K5 g1 ^ C; P
5 a9 |5 M2 R1 z
(A,B)---m*n*k---(1,0)(0,1)
( n( O2 l" |' v" `; a; V, ]) @ V# t5 U7 h2 B, P( T# M0 q
(A,C)---m*n*k---(1,0)(0,1)
@9 m7 J4 L9 ]( S4 {( \( V5 S8 D* G3 o4 ]" I; ~/ Q
(B,C)---m*n*k---(1,0)(0,1)& c7 t1 b9 s" G0 N1 N) G7 ~. i
0 w" V; f; G. C 这就意味着存在3对瞬时作用,也就表明这3个粒子彼此之间的距离都是0.随着时间的推移网络的收敛误差会不断减小,而网络的分类准确率会不断变大。这个过程意味着A被错误的分成B和C的成分少了,同样B被错误的分成A和C,C被错误的分成A和B的成分也少了。6 T+ e8 l& P+ @
7 }0 K5 V& i* t0 f% j
所以这个三分网络可以被解释为,3个距离为0的粒子不断的相互作用,随着时间的演化,最终变得越来越像自己。
1 O; g. [3 y- y( k' H, e* J
' r. V* Y4 Q7 ^4 V3 z7 d而前面的实验表明相同收敛误差下,迭代次数取决于等位点差的绝对值的和,这次就继续验证这一猜测。
8 ]' d5 p8 w- ~% v" U: ^" [: ]% O' |" s+ S$ D
用的训练集是mnist的0,1,2,3,4,的第一张图片。用间隔取点的办法化成13*13.) y2 P3 j5 m9 d8 {& s8 y; y: ~
9 }) T. l0 O- d+ c0 Q- h; Y) ?6 c( 0, 1, 2 )---169*30*3---( 1, 0, 0 )( 0, 1, 0 )( 0, 0, 1 )这个网络简记为0*1*2.就只有3张图片不断循环往复,直到收敛。共进行了10组得到数据
7 _5 f( y7 d$ L6 y: M
) M# ~. r. h( }; Y6 j! \1*3*4; }; H/ L u" T. D
( a+ V ^- a$ |2*3*4
2 H! n7 w, g9 |6 P& o% w- J1 \5 R# e: c# `) ^7 R! M2 g( v/ a
0*3*4
' C1 k$ ` _) m1 b7 f
8 I" o7 P* ~1 b5 a% _0*1*43 `8 w, K3 _5 ^: z
5 ?- ~; \$ B3 e @+ O2 A$ |$ J! c0*1*3, P+ G3 d0 w- l" c; \& D. k
& R [! U; Y8 I: {2 e1 p& k# U/ w, r
1*2*4" ~' k2 p S& M$ F3 l( i! S4 s* m
5 l1 U* G2 r& l8 _! K7 B
1*2*3
8 `! x' t: h' x# C) l: o
. M4 y1 A0 l+ G) L) h& b6 ]0*1*2
+ [% m+ G, V1 s, U6 @4 Q' H# a2 ~4 Y5 V1 a( r( ~* B
0*2*3+ Q8 T! [, ]* l, k
. p3 x1 C- l5 t, F# \0*2*4/ i6 u, \7 @5 M% J* b4 T& i4 G: S3 Y
7 e8 W& S5 X; E8 F8 j9 Mδ
6 W, S7 p0 B' d: s9 a
; L9 z5 y$ l/ z, N6 Z% x迭代次数n
7 \# d1 m, x8 `' ]9 x- e: h% h& u! d; y8 x' `; C' F- R
迭代次数n3 X% `3 c% ]% J, A! w
# i/ b ]/ V1 D& C! w2 {0 r# S迭代次数n
! B R( \! q0 k) o' E" |5 q! ?5 Y- f& t+ ~$ B
迭代次数n
) n7 W- z, f7 M) x: g; o
- |. M6 l2 S) @" B* H迭代次数n
; Z9 m. v7 `8 ?3 q+ k& |/ @& X; P. e9 c
迭代次数n
) |% w3 [$ S; o; Y J' P9 O J/ T" I& A$ S
迭代次数n
8 O# _/ F$ H2 i
E: T$ C6 L! `7 l* v% U8 @迭代次数n
: \' {9 E/ V" O W& R# X6 A3 G; K. G6 [/ }7 K/ J4 c$ V
迭代次数n
; V8 a* O) w, t% r6 O
, ]# b8 k9 U5 |, N/ |迭代次数n
" V1 A3 ^6 N! _, P
0 w0 c/ Z M0 d5 }" w0.01
7 [9 w( W( g( `) o
$ z7 {; A; s8 |3 h9 k# L1763.1809
8 R& t6 v: i5 }5 y0 D& y \% h$ n
1626.5729
3 ?( t3 Y. y6 l @0 p% n! f- W# s G* {! _: p; q
1672.4523
% H( \( l/ \$ W- S: `% r' G$ K& D& j% D- k) p/ }# P" c
1635.9196
: D! J0 [! D) i/ z* n1 L7 h1 A/ m0 h% {8 S& j/ {1 C2 R# O
1596.70351 ^ ]8 Y% V4 S4 E7 L
# T7 v, U+ ?+ V9 _2 {$ M1 b8 t Y/ T
1620.407' B' E8 Q# V; x% B$ N
1 F8 t+ e) {6 {9 L! v
1563.8945
' y- `& z+ ]4 h4 ~0 K# W
% D$ |9 r5 z1 W! i6 x h; }1444.2915
! C# L. y/ ~/ u* ^, x. |5 n
+ R9 F3 U% y$ Z8 j1 x1 S1410.0302" J M* M6 f* x( h1 }
1 X9 i2 E( Z. E) D/ h
1465.4171& r8 e4 O; v, d6 T# J
: S0 @7 v* f4 M/ t7 i% O0.001( i& v! Z# g& g; J# \7 l
6 s7 {% @, u p, f; n# ?, H [5 N
13065.196
; X7 J( R5 P6 o( d1 z2 f6 z' h( ]* X0 v
12674.945% Y/ X* U2 G# T6 K7 A9 J
/ o, {6 v, Y- a" E$ q: C( W; {) x12747.7296 g7 K1 _! v+ Y& R% L( X
% k4 U' @) c4 m. p% y
12386.216; C8 w0 w; `, `4 @& M/ |5 G# B
# [0 Q& J6 u K% _% n* b4 e; ~12349.02
" T8 s( t1 R7 R" E6 G
4 z& ]8 p; z( E. u; z12282.201* g0 C) m6 [6 W* q$ G/ R! J
/ y* ~2 f8 p' \8 t w$ Y+ @# V8 }5 i& A12270.035
; K0 g; A6 j) Y" v2 q. w# z
4 p' i, z, y" Z5 _# j+ E11338.4772 I6 ~2 Z' F6 M8 s- O2 U
0 E/ B) Y/ @: J( U/ j6 X10985.201
1 N6 C, b! Y$ `" P8 S7 \2 \8 m+ w4 ~+ H* a' I' J. m
11015.503
4 a5 V: b) [ `' {, N& m; M8 ]+ N Z2 q2 p! {
9.00E-04
: `3 L0 | w- j
& i F/ L0 u. X) R14352.452
% S5 L" L- q" G9 {9 `' N, i4 W3 V& x( Z
* F) x$ v5 s- x14004.633; n# Y0 N% @$ k; }9 d# s" r
2 n2 C7 z6 z. \# t14062.829
* U4 _* [* A7 V, |- k3 d/ g- `5 i
7 M& g5 I8 }2 b( {6 f13629.467
$ p2 B2 H/ O/ f% ^# U: @
) ^; k' C, c" j! Y# T7 V, l13613.362 G- n) m u) A) m" ]
' @3 Z" Z4 d; M( r1 z1 J6 D Y) I5 s
13609.563
# t, i) p1 w) l [# b
7 R4 V+ U; p- Y% V13530.322
# m& s" q& \* z$ t' k- r& _. Y6 V8 V/ f$ n* y" D
12458.171
* T" h& S3 W/ D( e2 y9 c* k! x- R- {5 w6 E3 _3 A$ G5 ]* U0 N8 R
12176.362
& H: C( F) V& y1 T& d* A9 h* F$ ?1 @' w m/ P: {8 b# j
12225.96
$ D" s' P1 H3 K* T, k' I+ c# Z2 a- I5 s) l6 I! c. \$ E
8.00E-04
# A$ C$ P* K/ w) _2 g" q' G8 ^' ^4 G1 l/ h3 |
16141.206* h7 ~3 B: J& R( L
* S* x' K" Z( Y* t% ]
15611.101
4 m/ V0 c2 J( H- M0 i7 s, V" A6 v* ~% R4 K
15749.91. s: S b& G/ `( j6 r1 P
5 A* z" j8 n4 \5 Y0 g
15264.980 ?4 U. L4 w8 q! H
0 s! ^# I5 u% Z$ T( |1 J3 u7 K
15228.447) d) x! E: O" p
: d/ }/ M/ V% w! ?6 u15207.628
' a3 n! m( w _* V' ~" X0 X0 w% p5 ~3 w l
15053.714
8 z. u) j: {/ W1 Z' D
' h. O% n$ q0 [, [$ F( q5 x14044.729
; r6 }2 u c. `' S
& @! h" _' \ l8 E5 D( G13530.3978 y) j6 B" h( W7 L1 t6 k
/ ]- z4 X8 o9 ], {
13654.678
. H$ w, o/ R* ~0 S. |# V9 y# }8 N& }+ k B' p
7.00E-04
/ p; O+ d$ y* o. p, S2 m6 {6 `+ s3 ^) \; Y6 H% y
18194.397
3 S+ L+ v; V" O, Q
; P/ _4 _- a3 l* o17760.6384 _& {# \3 t) Z" b
" N8 c) ^; t# g, X. N
17743.578" x+ i. z5 w8 o/ i' {8 h+ y
& o$ j9 g" I2 `* `$ a/ n6 J17333.377
! k% h5 ]- ], f+ D# n6 h1 h, m9 W/ f. w+ n4 D
17293.874
: N, m' h e/ E$ K3 U# g) \
4 ^6 _4 E, w$ |/ @1 ?! S' x17204.638% `9 t+ i' }! W d/ n \
4 b1 f7 n4 `6 N
17058.8096 E- Y* l3 H" A# W) J
8 |% |0 @9 U* s+ k L$ l0 M
15946.1010 k8 g$ @7 V) A% `; o8 ?
0 h0 \4 G% q9 T( ^8 o
15491.266
- }% Z: ^1 ?- U/ T8 O8 h6 _4 x* p6 \$ r8 z- u6 L$ a" V
15399.5386 H% ]2 \% o+ k; a
0 |- m) r' Z- w; w
s' \5 Y$ N. y# G3 F4 ` X
( `8 T t$ w I6 b130
" u' x3 g/ b' i9 l+ q$ U
1 i B y9 S2 g ^& T- Q218
$ ]$ }5 }& S) a0 P
2 P0 D6 M% Y* w* V& w, ?198, O6 e1 T4 z9 a
F# }) n2 B4 d8 V# H$ q206
) E- |8 T" K& P) \% v5 M' S, ^. Z7 S r6 t/ g V4 ^4 S
2045 e7 ~* U1 _6 `4 y7 f: M0 d
% }+ y. {# s n! ~& P/ H. B0 F
218
+ Q2 `$ ?( @# Z' ~
# X; n( t( [ L% r5 F$ J9 w2207 Y$ j/ K$ j) b6 @' I
8 g& C' d3 m5 J) q+ Z) A+ I2042 J1 a1 l* m8 T# Z0 ^% |+ @( \" N& f
; P- N: K- A, x1 Y
220
5 @, H/ e S. Q
9 P4 Q) m$ }* f3 T216
' n0 }; P; ?- K; e+ p4 n! [! ~
0 v; A h% ~- c6 I: V5 n将收敛误差为7e-4的迭代次数画成图: d+ x- l% N1 |8 @+ l
* ^2 _- a- Q9 ?! Q% k# B/ V. p
9 [8 C- v9 T& e+ T) S0 X4 [
* p: m. l. o, E2 c7 v8 i再将移位距离S的曲线画成图
, D0 M! B9 S5 R9 J6 M: g2 w" n- k* I5 c' Q6 I
! N, L* _+ P7 a9 j# M$ y5 D* l
1 j7 P& ~7 ?4 O/ L在这组数据中s和n之间的反比关系依然存在。
6 a1 Q2 f( D0 F: ]7 @, Y6 E
0 y( K$ f- P* L" z0 a% C移位距离假设
: _ }3 M- f5 ~* h; ?+ C
" [' B! I8 m+ _(A,B)---m*n*k---(1,0)(0,1)
- W6 q9 ^! M w9 G( s# M
/ w- l& L3 a, k) _/ ]9 e! M! V& b
1 K. u1 a1 Z! Y8 y$ b+ i" H4 v用神经网络分类A和B,把参与分类的A和B中的数字看作是组成A和B的粒子,分类的过程就是让A和B中的粒子互相交换位置,寻找最短移位路径的过程。而熵H与最短移位距离S成正比,迭代次数n与S成反比。
! r4 N5 l/ r- R8 U- s
, T0 Q& L; u8 n" t; U移位规则汇总
5 H! q" Z9 c* ]% ~5 Q- y0 r
& U# S* N; `- L. T$ j) n* k1 y5 Y移位距离就是等位点数值差的绝对值的和S=Σ|a-b|,如果训练集有多张图片取平均值,如果是多分类问题则移位距离为所有两两组合移位距离的和。
# g5 k3 p! t( P) x- m% T1 ~2 ~- V8 U; w6 J* Z% i: z0 c" R
如对一组3*3的矩阵6 m9 d( w& m! p( g! ~
- p" x! H5 u- _' z0 W: ] R: W- O; o1 ~; G9 a5 ]
- } W5 b% E+ o; O) t. p- [S=s0+s1+,…,+s8=|a0-b0|+|a1-b1|+,…,+|a8-b8|# W$ B7 S4 N, r7 ]
$ u' p9 Y( g5 e7 b; t
如果是3分类问题,就应该实现3个形态之间的两两分类,也就是要完成3对等位点之间的差。- e5 E$ e8 c8 X& ]* ^/ S
' Z' H# Q! U) q9 w/ x+ {" ], F$ y+ B/ I" g$ q* z- }% X" R+ q
: m: n6 Y- a9 y7 G因此移位距离; U$ g+ t$ \7 ?- b0 a9 ~
" i0 |8 Q+ i, X; O1 pS=Sab+Sac+Sbc=
: P" o6 L2 B- I7 L" T/ w, e5 D1 ^
|a0-b0|+|a1-b1|+|a2-b2|+|a3-b3|++ T5 K: H4 V, W5 l2 A: t3 u
, {# a. w# H9 N0 K" ?5 g
|a0-c0|+|a1-c1|+|a2-c2|+|a3-c3|+% j. R& `# W' p) b3 T" O: _4 T
' E2 U" x$ k" z( E+ q6 \) B
|b0-c0|+|b1-c1|+|b2-c2|+|b3-c3|% `; }/ b& A. m! q
————————————————% O( N# g& a0 F
版权声明:本文为CSDN博主「黑榆」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
4 B% c% R6 A1 W1 D6 Q原文链接:https://blog.csdn.net/georgesale/article/details/126690670
) w4 z1 d- R" S5 \& L& {2 x' x- U9 Q2 P. J2 i# l8 L# i
) b# {8 s* r: o( W6 K9 i, A
|
zan
|