在线时间 1630 小时 最后登录 2024-1-29 注册时间 2017-5-16 听众数 82 收听数 1 能力 120 分 体力 564681 点 威望 12 点 阅读权限 255 积分 174627 相册 1 日志 0 记录 0 帖子 5313 主题 5273 精华 3 分享 0 好友 163
TA的每日心情 开心 2021-8-11 17:59
签到天数: 17 天
[LV.4]偶尔看看III
网络挑战赛参赛者
网络挑战赛参赛者
自我介绍 本人女,毕业于内蒙古科技大学,担任文职专业,毕业专业英语。
群组 : 2018美赛大象算法课程
群组 : 2018美赛护航培训课程
群组 : 2019年 数学中国站长建
群组 : 2019年数据分析师课程
群组 : 2018年大象老师国赛优
三分类网络的物理意义是什么?
/ T: R8 I: L- d( D, \
! @+ s9 ]6 v# I, p6 G + f+ j& K9 q" ?$ R, ?
(A,B)---m*n*k---(1,0)(0,1)
6 C) [% j5 s% _9 T. d" G, z5 i9 w4 p 2 j" G' L$ r6 Q8 u9 L; _
对于一个二分类网络可以将被分类的A和B分别理解为粒子和环境,因为粒子处于环境中。于是A和B之间的距离可以理解为0。因为t=s/v,则即便A和B之间的相互作用的速度小于光速,A和B之间仍然可以实现瞬时作用,并不违反理论。
) q8 ]: ?. y* i+ s& E 2 `# g3 A8 K) u3 T9 `1 k
( A, B, C )---m*n*k---( 1, 0, 0 )( 0, 1, 0 )( 0, 0, 1 )
$ U) h F) S! e9 I/ O0 w 2 @' a `: Q$ N9 f
对于一个三分类网络要完成3次形态的变换。A⇋B,A⇋C,B⇋C,每一次形态变换就是一次二分类,因此对于一个三分类网络可以理解为由3个二分类网络组成
9 j- W% x0 y3 Z* b, A5 R/ ]4 z
0 ] f$ y# x8 D" @3 C (A,B)---m*n*k---(1,0)(0,1)6 H4 }/ q% g2 @! X3 B. ]6 i
0 ]. ~1 T" [$ G E. r8 Q (A,C)---m*n*k---(1,0)(0,1)+ L! `+ j% ]8 F3 v9 R
, ]" A0 y, k, m- N+ p; x8 M
(B,C)---m*n*k---(1,0)(0,1). }& t: X" U5 C/ G3 L
. U$ a& E: \3 C8 z( I$ E 这就意味着存在3对瞬时作用,也就表明这3个粒子彼此之间的距离都是0.随着时间的推移网络的收敛误差会不断减小,而网络的分类准确率会不断变大。这个过程意味着A被错误的分成B和C的成分少了,同样B被错误的分成A和C,C被错误的分成A和B的成分也少了。. S* x" Z% E Z: b0 D
! x$ P& X4 B: ?; Q- H6 H9 B
所以这个三分网络可以被解释为,3个距离为0的粒子不断的相互作用,随着时间的演化,最终变得越来越像自己。
( ^$ J* G; v& _( O; G& p3 K
- F' u( p& \5 L) Z# e) d6 r0 @ 而前面的实验表明相同收敛误差下,迭代次数取决于等位点差的绝对值的和,这次就继续验证这一猜测。6 J- N% Y" I. y7 \9 w+ d& \2 ]
% r" r- o, s+ M7 c" g) c
用的训练集是mnist的0,1,2,3,4,的第一张图片。用间隔取点的办法化成13*13.
+ k/ H4 j1 g* R1 S6 i) s% M Y
# f/ w+ R- k; x7 J ( 0, 1, 2 )---169*30*3---( 1, 0, 0 )( 0, 1, 0 )( 0, 0, 1 )这个网络简记为0*1*2.就只有3张图片不断循环往复,直到收敛。共进行了10组得到数据% F C: ^, E( V' A; ]
0 [5 q- T* o$ y
1*3*4
" B1 U+ m" T+ y7 ^0 v j
0 u6 b- W6 u) ]& b) h3 R0 Z& q, r 2*3*4
$ V7 `. n- }& W' u/ e/ G0 E/ e1 V0 G ' i) E, j O1 [$ R4 \
0*3*4
: p8 |. Y' c+ h) r O D
e. i% [3 ?; q% ~. P* F# V$ a. _ 0*1*4
" Q% }: d) v5 n3 q
$ {$ N! B8 K. Y 0*1*3- Z5 P3 H1 V" p
* f D4 O/ ?7 p7 v
1*2*4
! r7 p- l5 W/ ]: K1 N3 _0 O: G 0 j$ h! Y8 R' @1 [; J! i, W) U5 m
1*2*3' V, X8 d# P) y9 ~- j
$ X2 l3 c& {! V 0*1*2
W. K) ~, U- x \ i# s$ k - y9 |! {3 @# I7 E# t, H1 H2 M- |
0*2*3# {* C6 e) P. e" N4 `7 @
' n0 Y- z/ s7 S
0*2*4
, j& V+ u$ @) ` ' _$ g; Q8 C3 z7 p
δ( T) R5 ]) _& L5 H+ F
; q3 n- F- u% x2 Y5 o0 G
迭代次数n4 Z$ L* D3 k( k& p
+ B8 p) |% P% H: V3 g5 t" E; B1 T0 _
迭代次数n" h& A" x. {' z3 C5 G* C3 W
+ r" v D7 `# v 迭代次数n$ h0 ]* h. K# {& G
4 n7 ~4 e* {5 Q' Q% ^
迭代次数n8 c% N2 t5 Z( Q. u( [& Y, e# p
! H& o- u5 N* E$ o1 X3 @) ` 迭代次数n2 ^ P5 N$ s/ F1 t4 }
+ k: s4 D$ R! _/ W k) t
迭代次数n% n+ j- ]) S$ J/ J
" c% V- I! O4 U+ P ~5 O* C
迭代次数n
1 O* s0 o. z6 M3 r3 p
/ d6 V+ W3 I) s 迭代次数n
& [4 h/ H: J9 `' L0 A ]' y. @
7 w& c- P5 \5 x( J4 V 迭代次数n% p$ Z# ?' ~& v# g/ r: \, v5 P' A
9 ^, ~( Y" u& q! x! Y 迭代次数n
) H$ B9 R9 @7 M7 H
! j/ X0 L8 w! m, _' u# e0 P0 @5 p 0.015 r) _: y- W; a) f& A) P$ Y
1 Y" c6 s, {" P
1763.1809& y( q& N/ E3 g- M f' x
! X" J1 c" o" M% T' o8 C3 B. B 1626.5729( ], n3 L8 W& h; N) N8 j
8 e8 X7 y* S+ m1 f g/ t
1672.4523# Q0 ~9 l# u; R! Q
4 m' J2 I5 y4 O3 h/ l# T# u 1635.9196
: J4 E$ I- Q1 N - V( b+ ]9 _: Y4 d3 M
1596.70359 {) G0 b8 h% M5 d% p
: ^0 V: M8 l9 r- d* G
1620.4073 D2 P: d1 k3 ^
: T) _: t' H1 N5 S- E- I1 \
1563.8945
( R5 I$ ?- v. ] 9 Y5 c7 s( c3 h: [; T
1444.2915; P( D- m+ R4 h! M4 J
0 C7 c8 E. y1 ?3 C" Z
1410.0302
* f. T: M4 V7 l. c5 K) u. [ $ P- A, P5 D7 E* f) F3 H, Z
1465.4171: e9 u2 V/ d- W$ J" }2 o6 c
7 j1 F) e0 ]5 _" x3 ]' l" u 0.001
% k, q, S6 v* q7 g9 W9 u: Y$ j & A$ p1 m f, Z7 t. Z
13065.196
) O$ K& F/ c! X) @; M
. ?, }) r) g0 F' ?9 T2 g5 d% h 12674.945
7 z: g2 v2 ]- S) h) j' l
( b0 O3 [, L5 z% E/ K( g$ h3 Y( V 12747.7290 R. ~. e$ n6 I ^( q+ v8 E
! l) m7 J( F4 |( a* @ 12386.216
" R* i8 `2 m6 B- t; o" T1 J" o
8 Q9 P6 k, e" V* P( s) v 12349.02) A4 h8 j K+ M" B- D; M7 `. F
+ i% K! k# h7 G( x+ F/ t7 k
12282.201" {6 X$ T9 D h4 h: q' J
$ X+ l6 S1 X2 E9 v 12270.035
# o: H) C: V! j9 k/ B( h. u# E) f 4 O/ c+ _+ c/ _0 Q, U7 n
11338.477
{$ ?9 `, l( F! y2 { : o+ E5 n( j J( b& {0 l E
10985.201
+ G! K% u6 I& c B6 T9 p1 t
+ P+ {0 g3 u) J |) |2 j 11015.503- _2 P* S6 r( m1 K
3 v8 Z9 s' w! I) e Z 9.00E-04- j) a+ @; Z; ]9 ^, k, L
4 A( i" A/ a2 }' d% _2 O6 I 14352.452
' d& U8 A1 m- e- n$ M9 l* r
/ m5 \5 y5 X' B 14004.633
! H# [1 j+ Q/ {: Y7 g) E0 W - H8 P& T. m- o
14062.8299 v3 b v0 N: t0 j; l! v0 ?
" U8 S7 C: C3 ?1 S! g8 o 13629.467
' k1 B& H! \# X' F* m9 f
) P3 ~, t: B7 g( ^ 13613.362
& B- g" k, x0 P* q
- q% z$ P0 l: b( ~# N% B7 U 13609.563: f1 Z w$ \: [* f# ~; [
9 i% c! G* q" e$ {
13530.322
8 {6 h$ U6 w, _5 q/ e
; e- a2 m- G, z- z3 ]3 ` 12458.1717 M N$ K1 M: | ~4 Y2 p: E8 \
2 \) B) z G3 T4 {, O5 @ 12176.362
6 S1 C0 }3 u& w4 i, T5 b1 R 7 e3 C! t3 J; |8 ]# \. l% X
12225.96. W; U7 ^, {3 a( h+ H1 [# D
/ V& d' x) z7 |9 h, ? 8.00E-042 ^- f; ]3 S i! I+ Z3 ]5 v
: V G6 Q. y" D0 f
16141.206
0 ^+ ?5 x7 E3 R: W- R
& U0 y8 D5 s k$ {3 P! B4 r& m 15611.101
& I2 c& M4 `) n/ g, _& p f" Y) m
; F+ t }8 N: ~) A! l+ B 15749.91% f$ t/ s0 v7 E% X% u/ C: C
0 ]9 J( m- k c$ p! o# p 15264.98
( f* } N, D3 j& M. O: I! N
0 b6 L, Z3 X' @5 U n" e" j( | 15228.447/ W9 L5 w4 q) U
7 T7 _/ |, P/ w) [) q7 T 15207.6283 P6 u/ a, ]0 R: h$ p( @) B
' D7 Y# n) S& E
15053.714% Q# A- K$ `( S/ c5 g
9 o8 {& R- U _/ h/ P8 K# O( s 14044.7294 H8 r6 v" [5 Z. G5 O
8 e4 a8 u: @* q) @: o& U& [( x 13530.397
+ {$ R4 X$ H1 _5 j" c; k4 U6 S/ b 2 u" N! C8 f( C! m
13654.678
. @0 P/ n) C; m
9 U' l$ t r- z 7.00E-041 w, C# l: V4 e1 V+ H2 e
7 x% g7 [: C! O+ Y. m 18194.397# T$ u. z, I0 W+ C* ~; z0 }1 r
% N+ t3 V% }2 f. g' R0 Z
17760.6389 T9 D# |6 C* w2 k9 ?
" ?/ V8 ?$ V3 t. d. A
17743.578
0 {) h/ I6 o" \4 J! K9 l ! A, z. O$ F: h- J( E- b) h
17333.3775 m k7 {. y+ a' x$ y
0 Y! u: B, R! g. a0 t% l 17293.874& Y* c. N5 e" j4 g( l9 x; T" R
7 h5 M( r" T* s- K) b( g% Y( M
17204.638
/ i, a( e( D/ e# k0 |& m
6 o& s5 U! O9 P5 j8 J 17058.8095 e1 N! d) v( l4 R1 ^6 H" g
( G8 A1 p; W# ^& W
15946.1013 p; Y. [. S3 y) ~0 U
3 l7 H, C3 g7 w, t6 ?3 @( K 15491.2667 I3 H; G! J' Q% ?( ]. l
; g9 d" x* Y A5 ?( ` 15399.538' K2 k; ?$ W' W
: r6 G! @' a5 N s
- `& t6 P' D5 [5 o6 o7 T9 N" l) N' ]+ K
$ J8 n5 F3 @- p0 p8 r2 e 130
8 d" k7 e/ X& Y# g- L4 [. x " H+ g* m( \+ y
218, K4 _2 n/ e& p+ S) `( T$ R- p
7 p. F/ |( r4 R3 i9 B 1980 d3 i. w% r4 h
/ H. a7 x' Y; D, Z. r B
206- N+ T8 q# G9 z) H3 C
& g1 f( O. m Z: M+ v; \' k' w1 X
2042 [; ~" p+ b6 z. M3 P `* l3 b
; w1 r) P' c4 q; u) S 218, i8 k# T. _, d( M& ~ J) G2 N$ ]
$ g5 }4 ^& {& P- k9 b3 J
220
: X7 f7 ?' a# i, j+ s# `
1 Z8 D/ K6 O8 m9 a2 E" p3 A 204
! J: a+ X' [: y" o# {; W
/ f- H& J) W3 G- q% K2 N 220
/ ^6 ~5 A& p9 k4 k. h# m1 m' l
$ w" ^( l# l0 ~2 r2 S1 ] 2163 q: R7 _, G* X0 }6 o! j, e
3 R8 s" e6 e2 f2 ?! p. I K1 ] 将收敛误差为7e-4的迭代次数画成图
& K' B( m& \0 @5 |4 p9 w2 X
! s3 i$ b4 W" N) `4 l* N
5 I) P; ^7 Y' u( ?1 [: B0 H 1 K' I% ?& K( t. |$ ?% ~
再将移位距离S的曲线画成图
; v7 K. X3 Q0 J/ v1 w2 }; ] 1 z; W# r' l9 u# B7 O
5 E" ]1 k( ?( i- g" |; n
* B" s3 R# ] x+ F+ e" F 在这组数据中s和n之间的反比关系依然存在。
* a: W3 l7 b, x2 S7 g
" ?: K+ |. g' a) x6 `: o 移位距离假设
- C1 U/ h3 t* {& x
/ l2 c- | H8 ~5 b6 ^1 M (A,B)---m*n*k---(1,0)(0,1)* H; y* e( D; H0 C) j
/ @+ ~; B& C9 U9 V* x+ U- |; l
( @5 R5 h. T& f- ~9 V& e! Q 3 r E" E) c! V& N0 v9 X
用神经网络分类A和B,把参与分类的A和B中的数字看作是组成A和B的粒子,分类的过程就是让A和B中的粒子互相交换位置,寻找最短移位路径的过程。而熵H与最短移位距离S成正比,迭代次数n与S成反比。- y# |' F4 z6 a) j; ^8 p: ]
* b L0 `- }# v, U
移位规则汇总; y' f w. V( T3 z$ U
! d7 P2 x0 J) p1 Q" V* C) c5 }
移位距离就是等位点数值差的绝对值的和S=Σ|a-b|,如果训练集有多张图片取平均值,如果是多分类问题则移位距离为所有两两组合移位距离的和。0 `8 M& f" ^% B% M$ Z2 Y. ^3 I7 A
. x, u. |' w; J) o7 p' O. X: G- S 如对一组3*3的矩阵$ { d) V- m! \4 l" q& e9 d
* n$ U& c1 z0 M/ ~( v" e9 k ) d8 p* q8 r. n# r# Z- Y Y3 m
7 j) y0 Y5 k6 J9 s; m- |4 G2 d+ t: \ S=s0+s1+,…,+s8=|a0-b0|+|a1-b1|+,…,+|a8-b8|4 u) I6 }' r; w
6 w6 i% C& ~% B" s 如果是3分类问题,就应该实现3个形态之间的两两分类,也就是要完成3对等位点之间的差。! d) `, }% S3 k' l' T3 ^8 S
5 L9 w6 J+ Z, a
8 C5 H5 I6 a6 x# e7 Z 7 C P: B0 a" T. ^
因此移位距离5 \. `! B, a; t5 x1 [
5 v4 B* I q [, m. `; l
S=Sab+Sac+Sbc=6 o7 [& g9 w, d! y
+ \3 |/ ]6 g6 [ |a0-b0|+|a1-b1|+|a2-b2|+|a3-b3|+
! ~% [6 W6 I5 l" u- Q' |( M, F- E
; S4 ^' i" n' E# w |a0-c0|+|a1-c1|+|a2-c2|+|a3-c3|+: b+ x c& p0 c
( B. b- _- k" `- \ |b0-c0|+|b1-c1|+|b2-c2|+|b3-c3|
- {+ @/ W5 ~2 F! j4 { ————————————————
" ~; \/ }) e7 s 版权声明:本文为CSDN博主「黑榆」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
0 f8 p& K) E& C/ F 原文链接:https://blog.csdn.net/georgesale/article/details/126690670
& Z& ~8 Q: K$ D- b( V, B
6 O/ ?8 m7 E" }- \
/ V+ V0 b6 I7 _( Y% A+ C. m
zan