[笔记分享交流]关于模拟退火法的基础概念及模型思路

ZMIA

: i1 W3 |  R/ l6 Q
  本人代码废负责建模，最近读了论文深感有必要了解一下各种算法的建模思路及基本方法论和应用范围。
4 I: @+ l( Y9 M8 M$ |  因此以下笔记不涉及具体代码，只包括最基本的概念及思路。
# `! k/ s, \' N8 K/ x  笔记中摘抄了网上资料的私以为有用的片段，并根据本人的理解进行整合。如果有理解不到位的地方欢迎补充及交流。~
  以下正文：
) ^/ T7 D: `. T& W9 T8 q  模拟退火法（ Simulate Anneal Arithmetic，SAA）
. I/ K5 _, q# m6 v+ h1.What:
      是一种通用概率演算法，
2.Use:
2 ?3 k& p6 q$ Y* d( w1 G      用于在一个大的空间内搜寻命题的最优解。
) ]# ?* V/ H: K! v      开始用来解决TSP问题（Travelling Salesman Problem)。即，单一旅行者由起点出发经过所有给定需求点，最后回到出发点的最小路径成本问题，是最基本的路径规划问题。
3.模型(How?):
      算法可以分解为三个部分：①解空间:将所求写成多元向量形式，该向量可能的全部值
0 g4 g1 @2 \0 S' \) k+ _- X                                             ②目标函数：使当目标函数取到最大值或最小值时代表目标达成，从而能够获得最优解
) ?6 q; Q' ?  O5 B2 u                                             ③初始解：初始设定的值，理论上与结果无关。但一般要多次调试。
  基本思想：
      ①初始化：初始温度T(充分大)，初始解状态S。
6 U2 w0 H$ `2 D1 v! ^; [$ m2 T8 a, X      ②由一个产生函数(要求该函数由一个S可得到不同S'，且简单)产生一个新解S'
      ③由评价函数C(S)计算增量△t'=C（S'）-C(S)
      ④判断：if △t'<0且T>=0，则S=S’
! x5 b5 L$ \" |                   if △t'>0且T>=0，则以概率exp（△t' /T）接受S'作为新的当前解
4 c# a% f3 ~! |; R      ⑤终止循环判断：if 满足终止条件，则结束循环。终止条件一般为：连续若干新解未被接受
0 V5 m; C( ]& N7 z6 d2 m4.性质：
8 K, W& t1 M. S7 u6 `      模拟退火算法与初始值无关，算法求得的解与初始解状态S(是算法迭代的起点)无关；模拟退火算法具有渐近收敛性，已在理论上被证明是一种以概率l 收敛于全局最优解的全局优化算法；模拟退火算法具有并行性。
5 e, ~  _. u' X3 q% d7 O1 t5.解决TSP的思路及伪代码：
1 |' y: `/ ~% m1 i  （1）思路：
1. 产生一条新的遍历路径P(i+1)，计算路径P(i+1)的长度L( P(i+1) )
9 \/ c+ |2 r7 k- ~2. 若L(P(i+1)) < L(P(i))，则接受P(i+1)为新的路径，否则以模拟退火的那个概率接受P(i+1) ，然后降温
" V: o  |* L5 D9 i1 Q3. 重复步骤1，2直到满足退出条件
　　产生新的遍历路径的方法有很多，下面列举其中3种：
1. 随机选择2个节点，交换路径中的这2个节点的顺序。
2. 随机选择2个节点，将路径中这2个节点间的节点顺序逆转。
3. 随机选择3个节点m，n，k，然后将节点m与n间的节点移位到节点k后面。
: I) ?7 Y# F/ q' r
（2）伪代码：
Procedure TSPSA:
begin
init-of-T; { T为初始温度}
3 w, N$ u' s* m. |9 dS={1，……，n}; {S为初始值}
termination=false;
9 B1 S4 [$ W/ T! ?2 Y: Wwhile termination=false
begin
+ a$ n' e" s' N( J- T: Sfor i=1 to L do
begin
generate(S′form S); { 从当前回路S产生新回路S′}
Δt:=f(S′))-f(S);{f(S)为路径总长}
6 |/ R1 g, Y* A- _$ {* t+ ^IF(Δt<0) OR (EXP(-Δt/T)>Random-of-[0,1])
S=S′;
6 e6 [7 X0 F1 Y( e1 TIF the-halt-condition-is-TRUE THEN
2 Q! n5 d% q* I/ ]) i1 stermination=true;
End;
T_lower;
" `' @/ S3 X& m7 D1 u3 a0 @0 d2 lEnd;
End
& a" ~3 |. D/ {, q9 s) @( ]6.应用：
$ f2 H/ F4 u! m% ^5 x  求解最大截问题(Max Cut Problem)、0-1背包问题(Zero One Knapsack Problem)、图着色问题(Graph Colouring Problem)、调度问题(Scheduling Problem)
7.重要变量及其选择标准：
" J) x: V9 G1 j  O+ C （1）初始温度T：T大，则的得到最优解几率大，但计算时间慢。因此需要根据结果多次调试。
" w* j" _& B+ [  n; I6 J （2）产生函数的选取？评价函数的选取？
) }4 D9 _- d5 m4 W5 N! e( A          评价函数就是目标函数吗？
8.进一步陈述，评价：
- B9 H2 B1 z6 E0 r    模拟退火法是对贪心法的改进。贪心法每次从当前解的临近解空间中选择一个最优解作为当前解，直到达到一个局部最优解，但是这样不一定能找到全局最优解。
  而模拟退火法是以一定的概率接受非当前最优解。
' W' d! j8 j+ _0 Y4 p9 U% J* Y' r  模拟退火算法是一种随机算法，并不一定能找到全局的最优解，可以比较快的找到问题的近似最优解。 如果参数设置得当，模拟退火算法搜索效率比穷举法要高。
, W) j0 w+ V2 m+ q& V" Y

chenxiaohao

这个我上网也都看到了，请问其中那个‘一定的概率找到最优解’是怎么理解的，那也有可能找到的还不如之前的最优解呢，这个一定的概率的核心是什么？

lingxin179

理论有点复杂呢，看案例理解比较好
) [8 v$ z( Y0 t$ u

数学数学345

能看。。。。。。。。