在线时间 1630 小时 最后登录 2024-1-29 注册时间 2017-5-16 听众数 82 收听数 1 能力 120 分 体力 559281 点 威望 12 点 阅读权限 255 积分 173157 相册 1 日志 0 记录 0 帖子 5313 主题 5273 精华 18 分享 0 好友 163
TA的每日心情 开心 2021-8-11 17:59
签到天数: 17 天
[LV.4]偶尔看看III
网络挑战赛参赛者
网络挑战赛参赛者
自我介绍 本人女,毕业于内蒙古科技大学,担任文职专业,毕业专业英语。
群组 : 2018美赛大象算法课程
群组 : 2018美赛护航培训课程
群组 : 2019年 数学中国站长建
群组 : 2019年数据分析师课程
群组 : 2018年大象老师国赛优
B& D" O. M1 H9 d6 h, F2 U
Python遗传算法工具箱的使用(二)求解最短路径问题
9 E {8 k, k+ G$ g% X% C9 p: a. p 前言
+ S4 J2 W6 r' K$ O
2 E4 ~* z) s }+ q& `3 k8 s5 r 自从上一篇博客详细讲解了Python遗传和进化算法工具箱及其在带约束的单目标函数值优化中的应用之后,我经过不断学习工具箱的官方文档以及对源码的研究,逐步更加地掌握如何利用遗传算法求解更多有趣的问题了。
$ M# v1 [( `& D
/ H& R6 s0 {' h+ E# L# x0 R' r 首先简单回顾一下Python高性能实用型遗传和进化算法工具箱的用法。对于一个优化问题,需要做两个步骤便可进行求解:Step1:自定义问题类;Step2:编写执行脚本调用Geatpy进化算法模板对问题进行求解。在上一篇博客曾“详细”介绍过具体的用法:https://blog.csdn.net/weixin_37790882/article/details/84034956,但完整的中文教程可以参考官方文档。
2 u! j/ O+ |6 O8 O7 i, n- X 8 U b& |- C( X* N' h c. f
下面切入主题:! g0 N. ]; q& v( q
" K5 Z4 S% J6 H1 b' [$ S
本文的“最短路径问题”专指图的最短路径问题,而且只研究单目标的最短路径问题。(实际上最短路径问题还可以是多目标的),参考用书推荐:《网络模型与多目标遗传算法》。这本书我已经上传到此处,可以直接下载到:3 k) ~- T+ z; k: u3 \' C) Z
# p y& G9 C6 w3 b- U5 m: i9 j" Z
https://download.csdn.net/download/weixin_37790882/117002025 j( Z) C! d: |8 o8 K
3 I% n v0 N- m( ^) m 图的最短路径问题从广义上说其实有很多种类型,比如:
( n! s4 z; j3 }0 t
/ {9 Z" V& P0 P8 m 确定起点和终点的有向图和无向图的最短路径问题。+ j% D1 a @. a- ]; x4 q
旅行商最短路径问题。4 }( G/ S5 n/ o g$ t) Z
车辆配送中的最短路径问题。/ K$ I* E0 p3 L( G! ]
物流中心选址的最短路径问题。8 {, ^# C# X. W! v9 F% u M% f( [
其中确定起点和终点的无向图的最短路径问题可以延伸为机器人路径规划问题。也就是说,机器人避开障碍物从起点走向终点的那种路径规划问题本质上是一种复杂一些的“确定起点和终点的无向图的最短路径问题”。4 T! X* M& g# Q8 g7 o
% g1 Z$ `, |9 z8 y% b. W, R 本文主要讲解如何利用遗传算法求解“确定起点和终点的有向图最短路径问题”。对于无向图的,另外再写博客以机器人路径规划作为案例来展开叙述。
+ R( \. Y* L/ c
7 O9 Z+ E1 f7 F4 K+ Z 正文
6 X7 Y* V- Z' w9 }7 p
. j b6 s9 n; k8 ] 问题举例:
7 g+ H8 X' P% O) B/ I- l, z
7 _: j6 F: I2 q 以《网络模型与多目标遗传算法》一书中的一个小案例为例,如图所示,当从结点1驶向结点10时,我们经常会考虑怎样选择路径使得花最短的距离达到目的地。此时不需要像旅行商问题(TSP)那样,此类问题不需要要求所有的地点都访问一遍,而只需要想办法用最短的距离从起点走到终点即可。
& w* q' U2 n) d3 c" i) a3 D# E! c 书中讲述了两种遗传算法编码方式对上述问题进行求解。
法一:
利用二进制编码。假设 Xij 是有向图中所有边的一个集合,那么其中一种可行的路径对应的染色体可以是:
" I. y d9 @2 K0 _+ w( Z' D( u& e& j# {
. M) e$ S; O; C+ D+ Q! @& v 其中元素为1表示对应的边被“激活”,即最终路径上包含这条边。于是上面的染色体所代表的路径为:1 → 3 → 6 → 7 → 8 → 10。
& G5 ?7 U k e! l' Z6 B' t9 F , u2 t5 K ^+ _
这种编码方式最为直观,但有个很大的弊端:在进化过程中染色体往往无法表达一个合法的路径。于是这种情况下需要给遗传算法添加很多约束,此时便增加了遗传算法寻优的难度。7 Q, M9 _' [- B0 L
0 e' H E4 u: h" Y. G3 C A1 i3 o 法二:, b& b [6 k" n7 k8 b$ O: V1 f; ]0 ~
2 u7 y2 r, R9 n& G. y
利用“基于优先级编码”。这种编码方式是Gen & Lin 在2005年提出的有利于很好地求解图的路径规划问题的编码方法。参考文献:(Lin L, Gen M. Priority-Based Genetic Algorithm for Shortest Path Routing Problem in OSPF[M]// Intelligent and Evolutionary Systems. 2009.)这篇文献可能比较难下载到,我将其上传到这里了,可以直接下载查看:
' C3 o7 ?# i( F3 G% w: B 4 y- m7 I) b0 }5 a3 B# @& e
https://download.csdn.net/download/weixin_37790882/11699834
' J# W# Y8 W! y4 V1 V8 h
/ x, U. F0 z4 B: y, y$ Y6 m 下面来详细讲解这种编码方式:2 w& _' P$ P2 g8 J- d; n. k1 t
' {" y& ~4 R0 j/ i7 J “基于优先级编码”是一种间接编码方式,这意味着染色体并不能直接表示路径,此时需要利用额外的数据来进行解码,解码后才表示一个路径。这种编码方式有个特点是染色体的每一位上的元素是互不相等的,这意味着这种编码方式具备“排列编码”的特征。(排列编码即比如从1到10的10个数中随机挑选若干个数组成的一个排列。)
; ~" g9 u, h3 I2 V
3 W/ E6 A- C. t" I! v3 r 以一条染色体为例,看看“基于优先级编码”的染色体是如何表示有向图中的一条路径的:6 ~1 W" o. E$ Y& s K
& n1 X, ^8 b! s# `) D, S/ E. w5 G
* i8 o; U6 ^' E C; n1 p4 S
3 M2 W. |: O+ r3 X; }1 }! n
0 y7 Y5 H2 j0 ^) ]' ]9 j 上面这条染色体是遗传算法中随机生成的(并非最优),结点优先级并不是指结点的访问先后顺序,而是结点的优先级,是给后面解码用的。
" H; F; w; v( C7 Y: n: e
$ c0 T3 a4 U6 }% w. W( | 解码需要一个集合nodes,用于存储以各结点为起点的有向边的终点,即各个结点下一步可达的结点。本题的集合nodes为:nodes = [[], [2,3], [3,4,5], [5,6], [7,8], [4,6], [7,9], [8,9], [9,10], [10]]。因为python中列表的下标是从0数起的,而本题的结点是从1数起的,为了能直接对应,故上面的nodes的第0号元素设置为[],表示无意义。解析一下nodes的组成:第1号元素是[2,3],表示题目的有向图中1号结点下一步可达的结点是2和3。nodes的第2号元素是[3,4,5],表示2号结点下一步可达的结点是3,4,5。以此类推。
) q6 P% j0 O1 X: w
+ I: E7 f9 b* b# o" B 于是上面的染色体[7, 3, 4, 6, 2, 5, 8, 10, 1, 9]的详细解码过程如下:
1 p+ E8 j) |9 n! L5 L2 o' W
7 a9 L+ i9 z' p2 x* L
. m: L1 O1 l% z+ l+ f+ s6 H6 {+ k5 r/ m
从1号结点出发,在nodes中下标为1的元素是[2,3],表示1号结点下一步可以去2号结点或3号结点。此时从染色体中找到这两个结点对应的优先级分别为3和4,如图所示:5 @7 F6 w: b% ?8 Y
+ a( y" L7 N1 U6 q! e % a( [) h+ o! m" ~' j1 {9 J
从中选出具有更高优先级的结点6作为结点1下一步需要访问的结点。1 ]% [8 i) b( Y" j; [' _, r
! z z/ R) d8 L( | 以此类推,最终得到完整的访问路径为:0 p# W, c1 ]' s( X9 |, f) L- W
' f# i0 u( B, d1 t& d0 w, G 1 → 3 → 6 → 7 → 8 → 10。6 A' v' P" C( Y* a
* l; A" e2 z. {) P8 }, _
有了解码得到路径,如何求个体的适应度?
4 [4 c' {5 r; D* i d
* _2 D' u; _" \" r. v8 H. d) q 想要求个体的适应度,首先要定一个优化目标。本题是要让路径最短,于是我们便要根据访问结点求出路径长度,把这个作为优化目标。有了优化目标,便可利用基于目标函数值排序的适应度分配(ranking)求出适应度值。当然,这类单目标优化问题也可以直接让个体的适应度等于优化目标函数值(即路径长度)。而路径长度即为访问路径上各条有向边的权值之和。4 ?% V+ m7 ~% [/ T7 D
1 _$ |+ W% X" l( }) O' I6 P$ v 代码实现:8 U4 l1 S, |; f& H/ v6 C- t
2 R' {) ~/ T& v5 O
首先编写问题类,把待优化模型写在问题类中。然后编写执行脚本,调用“soea_SEGA_templet“(增强精英保留的遗传算法模板)进行进化优化。该算法模板的源码及算法流程详见:7 a# }; ]5 q/ A( b# [! q) _
3 F7 E1 [- m3 F: t https://github.com/geatpy-dev/geatpy/blob/master/geatpy/templates/soeas/GA/SEGA/soea_SEGA_templet.py
: O; K, [# ^% o0 i3 q2 ~! G% R$ ^ ( A( a0 t' y9 [7 t5 s8 m1 j
由于本题比较简单,故用4个个体、10代的进化即可得到很好的结果。完整的实验代码如下:1 I' D, t% ], n% [8 u9 L7 g8 i3 V* \
* {5 ]6 Q8 z/ @# u- ?/ B # -*- coding: utf-8 -*-1 H6 D3 _4 C. w! q8 k5 F
import numpy as np
/ L1 h2 d) q* p) S% O# T" z import geatpy as ea9 x& q+ S& l7 X( S3 h
class MyProblem(ea.Problem): # 继承Problem父类
; x. p$ `3 _* U$ i1 T) L def __init__(self):
+ m4 X3 B5 e% ?0 n4 Y: G+ s( n name = 'Shortest_Path' # 初始化name(函数名称,可以随意设置)
4 ?) r! h L* G- i% g M = 1 # 初始化M(目标维数)
/ |& Y% i! Y' B' p; N0 t' B- {* S maxormins = [1] # 初始化maxormins(目标最小最大化标记列表,1:最小化该目标;-1:最大化该目标)
$ ~8 l# z' B; Y* J: v3 h% l Dim = 10 # 初始化Dim(决策变量维数)$ J1 p- W" {1 W, `- I# q5 j1 s$ ?6 r
varTypes = [1] * Dim # 初始化varTypes(决策变量的类型,元素为0表示对应的变量是连续的;1表示是离散的)' r: c; l/ Q5 u
lb = [0] * Dim # 决策变量下界2 H2 K% B% a- Q' C0 ^4 X2 k
ub = [9] * Dim # 决策变量上界
. x9 r# C$ n5 |8 \% l" \ lbin = [1] * Dim # 决策变量下边界
: H: r: h& E/ F8 W# f) v; k/ V1 ` ubin = [1] * Dim # 决策变量上边界7 d' `2 W; ^5 D" V0 e ]
# 调用父类构造方法完成实例化
+ J) x! s1 R% ~4 n; O4 H/ x; o u( O: t ea.Problem.__init__(self, name, M, maxormins, Dim, varTypes, lb, ub, lbin, ubin) K# x) Q& x1 H* X
# 设置每一个结点下一步可达的结点(结点从1开始数,因此列表nodes的第0号元素设为空列表表示无意义) M1 S# w) {: {, A+ T
self.nodes = [[], [2,3], [3,4,5], [5,6], [7,8], [4,6], [7,9], [8,9], [9,10], [10]]
% T* b1 E4 W$ H* O # 设置有向图中各条边的权重
F: y) v( W2 N3 x3 C, ]* ` self.weights = {'(1, 2)':36, '(1, 3)':27, '(2, 4)':18, '(2, 5)':20, '(2, 3)':13, '(3, 5)':12, '(3, 6)':23,
+ J* l/ O8 ?3 J '(4, 7)':11, '(4, 8)':32, '(5, 4)':16, '(5, 6)':30, '(6, 7)':12, '(6, 9)':38, '(7, 8)':20,
1 @6 ~, y3 s& E, [! Y '(7, 9)':32, '(8, 9)':15, '(8, 10)':24, '(9, 10)':13}
- a4 M; c' P9 J9 I. F# } n, b def decode(self, priority): # 将优先级编码的染色体解码得到一条从节点1到节点10的可行路径
1 X' k0 e- n" ~8 X. Z7 { edges = [] # 存储边- c2 `3 u- i% c* n
path = [1] # 结点1是路径起点
' f( q3 `$ b; d: M while not path[-1] == 10: # 开始从起点走到终点
5 G8 e. V P5 I- y. o( I currentNode = path[-1] # 得到当前所在的结点编号
) g0 J' Y X# h4 Q m i% r nextNodes = self.nodes[currentNode] # 获取下一步可达的结点组成的列表
! `4 l ?3 W; j: A if len(nextNodes) == 0:
/ s* m, \, M. f5 ?) t. O( X raise RuntimeError("Error in decode: No way to go. (当前结点出度为0,无路可走。)")
; M" z0 ]* D* z# X5 K8 _1 |% @ chooseNode = nextNodes[np.argmax(priority[np.array(nextNodes) - 1])] # 从NextNodes中选择优先级更高的结点作为下一步要访问的结点,因为结点从1数起,而下标从0数起,因此要减去1
+ n$ g- {" h) \& M/ z path.append(chooseNode)
3 A- }, P5 B+ W* b edges.append((currentNode, chooseNode))
& A$ ?! r; X8 I8 M: b( g2 R" L& z( z7 _2 F return path, edges- L# }3 d. N W! ~# y4 r
def aimFunc(self, pop): # 目标函数& p$ e* m0 Z ?1 k# l6 g+ x
pop.ObjV = np.zeros((pop.sizes, 1)) # 初始化ObjV! R' M/ Q* Z2 }
for i in range(pop.sizes):9 s( @4 Y9 Q; ^8 {2 l
priority = pop.Phen[i, :]& J3 \/ }" d! n
path, edges = self.decode(priority) # 将优先级编码的染色体解码得到访问路径及经过的边
. `0 [; r7 N# {9 J) S7 F+ ? pathLen = 0, L1 [* F6 w% e
for edge in edges:
. A- C% V' g: L* |2 ` key = str(edge) # 根据路径得到键值,以便根据键值找到路径对应的长度
: |+ m6 b! A% ?4 X3 X if not key in self.weights:
" n' D$ Y' L$ A; v raise RuntimeError("Error in aimFunc: The path is invalid. (当前路径是无效的。)", path)7 Z3 ~% q% i, ` ?& h4 I
pathLen += self.weights[key] # 将该段路径长度加入
/ w. X" b7 H( Q+ B$ W* Q pop.ObjV = pathLen # 计算目标函数值,赋值给pop种群对象的ObjV属性
1 [9 g3 g6 x9 X" h , h$ B8 R3 Y5 M. m
if __name__ == "__main__":
& B) z: c4 _5 E: M! C problem = MyProblem() # 生成问题对象6 b3 X: H: Z1 |' u( t& W: |: Q( @
"""=================================种群设置================================="""
' M. n) X+ ^: k6 f" p( W+ ~9 X Encoding = 'P' # 编码方式: x' j' Y! X5 M4 G# m
NIND = 4 # 种群规模* x: J' ?2 I @
Field = ea.crtfld(Encoding, problem.varTypes, problem.ranges, problem.borders) # 创建区域描述器* T; F6 V1 ~0 z5 x1 Q3 t8 r2 E
population = ea.Population(Encoding, Field, NIND) # 实例化种群对象(此时种群还没被初始化,仅仅是完成种群对象的实例化). K' {. F8 X: X* E/ d! u/ _ |) E% B
"""===============================算法参数设置==============================="""
. t0 T" e5 m( \2 b6 R myAlgorithm = ea.soea_SEGA_templet(problem, population) # 实例化一个算法模板对象6 L" o+ G; m9 _3 ~( t4 C
myAlgorithm.MAXGEN = 10 # 最大进化代数2 p! ?; Q' z0 L/ n: J" c
myAlgorithm.recOper = ea.Xovox(XOVR = 0.8) # 设置交叉算子7 |. @ a- _& s. i' E
myAlgorithm.mutOper = ea.Mutinv(Pm = 0.1) # 设置变异算子: W* c2 ^( s( t9 Z# ~# m) z
myAlgorithm.drawing = 1 # 设置绘图方式(0:不绘图;1:绘制结果图;2:绘制过程动画)' g' A2 n3 L. [9 `, ~" o% q* F
"""==========================调用算法模板进行种群进化==========================""" g% F$ f$ @5 x; ?
[population, obj_trace, var_trace] = myAlgorithm.run() # 执行算法模板,得到最后一代种群以及进化记录器
7 m C, ]- l% w& s/ k4 @6 G, u9 {7 J population.save() # 把最后一代种群的信息保存到文件中
. U9 c) ?/ W! o. k # 输出结果+ c! X# t$ f( d- U
best_gen = np.argmin(obj_trace[:, 1]) # 记录最优种群是在哪一代
& P. G3 J# L# S4 F9 v& ]9 p: g best_ObjV = np.min(obj_trace[:, 1])
: S- C" v4 D4 U" O" A/ c% ^& X v K. b print('最短路程为:%s'%(best_ObjV))4 n& O: N! N- `! U* q! c" |0 S
print('最佳路线为:')
$ [5 P( @- M6 M: p# |/ e% U best_journey, edges = problem.decode(var_trace[best_gen, :])9 M4 E1 q2 C! K* K0 w
for i in range(len(best_journey)):
8 G! F! h! C. B/ l+ ^ print(int(best_journey), end = ' ')/ s( }; W, N' Y1 l" D( `1 D% h: w
print()" }; G2 M$ T; u) F; j! r! p
print('有效进化代数:%s'%(obj_trace.shape[0]))
# f, T5 J1 \- S. Q print('最优的一代是第 %s 代'%(best_gen + 1))
. {, y+ M2 ~6 {% G print('评价次数:%s'%(myAlgorithm.evalsNum)), l) N8 Z2 S8 q0 n$ q
print('时间已过 %s 秒'%(myAlgorithm.passTime))
4 x# N% _/ Y9 W5 @ 在有向图中表现为:
" K3 K# C4 T( ^1 @+ i3 N1 d 0 C% {: U9 S& R" d9 t. C0 b- R
, z; x w7 k# z, z2 Q' s! p9 I) h4 B + Y3 ]: Y1 a$ A' k4 b" m$ @
后记
1 x/ f7 [: c9 ~0 I7 r8 E & r; |& P' ~ G% q; S* }6 n9 m
值得注意的是:上面题目中的有向图并不存在回路,实际上,复杂的有向图往往会存在许多回路,此时需要进行一定的处理来避免陷入回路当中,即避免一直在回路上“打转”。处理方式有很多,例如在解码过程中对已经访问过的结点的有限度进行惩罚等等。这里暂时就不深入探讨了,待之后讲述无向图最短路径及机器人寻路问题时再展开叙述。
/ Z. Z8 e8 w" e: w6 I! V * ^) Z9 X8 L6 L4 j8 E& L) h+ o
最后回顾一下上一篇博客提到的”遗传算法套路“:
1 g' n# {7 g9 m, _- R' Q# G
; x- ~2 C) j5 u, s
. q3 W. d3 B, n7 r; m 该套路实现了具体问题、使用的算法以及所调用的相关算子之间的脱耦。而Geatpy工具箱已经内置了众多进化算法模板类以及相关的算子,直接调用即可。对于实际问题的求解,只需关心如何把问题写在自定义问题类中就好了。
! S" m: W" ~ F# n' s
* D( V9 `% B% g; X ————————————————+ ^8 ^/ i3 {( @9 L+ d9 y
8 y6 d1 C6 l' _4 l9 b# D& b- Y1 i) } ) L# \ D4 K( K' O: B' B$ G
版权声明:本文为CSDN博主「Strong_wind」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。5 N$ b; c$ U" K% q$ \
原文链接:https://blog.csdn.net/weixin_37790882/article/details/100622338* X# e7 Y8 u4 U8 e$ N5 {
; x1 c- Q% E! I; _
4 [" m4 t- z y' W
3.png
(44.92 KB, 下载次数: 411)
zan