在线时间 18 小时 最后登录 2012-9-22 注册时间 2012-7-20 听众数 7 收听数 0 能力 0 分 体力 1998 点 威望 0 点 阅读权限 50 积分 654 相册 0 日志 0 记录 0 帖子 105 主题 7 精华 0 分享 0 好友 18
升级 13.5%
TA的每日心情 开心 2012-9-22 23:13
签到天数: 44 天
[LV.5]常住居民I
自我介绍 数学爱好者
群组 : 学术交流A
数学建模十大算法漫谈
6 H5 k& @4 I7 I5 T 0 e$ @; n6 ?9 w( c' e% q- P5 S) N$ r
作者:July 二零一一年一月二十九日
: B. A/ [+ P. {+ n 本文参考:9 a! m/ |$ B5 o6 j2 m9 H% d; N
I、 细数二十世纪最伟大的十大算法 [译者:本人July]
6 W- E+ O% J4 K- V II、 本BLOG内 经典算法研究系列
4 t! P+ X0 ?. R III、维基百科9 r; e+ `3 z% z3 Z% P; {
------------------------------------------7 ^" ^( O5 P8 @" W- r
博主说明:# _; ]7 J) j3 y } _
1、此数学建模十大算法依据网上的一份榜单而写,本文对此十大算法作一一简单介绍。1 |* R) X/ J6 N$ _" O) ^# O
这只是一份榜单而已,数学建模中还有很多的算法,未一一囊括。欢迎读者提供更多的好的算法。
" S7 e+ K0 j! X) k2 `2 I$ f 2、在具体阐述每一算法的应用时,除了列出常见的应用之外,
" C$ P- W9 ~' R, [8 E' r4 q0 U: u 同时,还会具体结合数学建模竞赛一一阐述。& j6 z8 Y4 l% n3 ^; y; C( a5 i& R( V
毕竟,此十大算法,在数学建模竞赛中有着无比广泛而重要的应用。
, G( m7 {, F, t4 \+ H0 u% m; W 且,凡是标着“某某年某国某题”,即是那一年某个国家的数学建模竞赛原题。( S) Q' h" i a' m c3 h" |
3、此十大算法,在一些经典的算法设计书籍上,无过多阐述。
6 V' o# _7 }9 q! o0 A7 m 若要具体细致的深入研究,还得请参考国内或国际上关于此十大算法的优秀论文。
$ x: E, e) j/ F) j 谢谢。' C( T3 I2 ^, B/ M) |
5 b& t0 f) S, D
+ j3 R. m9 T& l& f+ [8 g 一、蒙特卡罗算法- E9 R) f. f. M9 q- R4 u5 c; i: c
1946年,美国拉斯阿莫斯国家实验室的三位科学家John von Neumann,Stan Ulam 和 Nick Metropolis D! x* K1 J% D4 @( z3 p: Q5 Z+ }) s
共同发明了,蒙特卡罗方法。8 \ d5 |$ o# T) O" D# w* [2 C! p+ Q: E
% s. l+ J- |, r+ i8 ~ 此算法被评为20世纪最伟大的十大算法之一,详情,请参见我的博文:
- r) s c6 Z: N G# _ http://blog.csdn.net/v_JULY_v/archive/2011/01/10/6127953.aspx + H6 N9 N2 i _, A
, c# x: z$ I$ b! a
蒙特卡罗方法(Monte Carlo method),又称随机抽样或统计模拟方法,是一种以概率统计理论为指导
; K) R S }1 E# {7 e 的一类非常重要的数值计算方法。此方法使用随机数(或更常见的伪随机数)来解决很多计算问题的方
" `6 q) b v |3 X# x& x( S 法。
& U( v, T& K* {" L: G" T+ O, ?2 y
3 _! C* P. T3 t) K 由于传统的经验方法由于不能逼近真实的物理过程,很难得到满意的结果,而蒙特卡罗方法由于能够真
0 T1 i4 w$ j$ q; g* o4 k 实地模拟实际物理过程,故解决问题与实际非常符合,可以得到很圆满的结果。5 O, R# v7 j% |" R* z8 }, L! p" ~
蒙特卡罗方法的基本原理及思想如下:
/ E$ U7 }& t4 c; p 当所求解问题是某种随机事件出现的概率,或者是某个随机变量的期望值时,通过某种“实验”的方法* ?0 l, @1 J. d% R1 ?& d+ k( U
,以这种事件出现的频率估计这一随机事件的概率,或者得到这个随机变量的某些数字特征,并将其作
% N1 q1 P+ `7 i, A% e& W- r5 b 为问题的解。
# g e0 B! `1 n3 Y! @1 ]" ?% I
0 [; Q) z7 e0 | 有一个例子可以使你比较直观地了解蒙特卡洛方法:% s8 s6 D) E) ~# P& }; g
假设我们要计算一个不规则图形的面积,那么图形的不规则程度和分析性计算(比如,积分)的复杂程+ s; A/ t4 d1 p$ m
度是成正比的。蒙特卡洛方法是怎么计算的呢?假想你有一袋豆子,把豆子均匀地朝这个图形上撒,然
8 n5 F9 f9 v/ O* g$ V1 D& |3 w 后数这个图形之中有多少颗豆子,这个豆子的数目就是图形的面积。当你的豆子越小,撒的越多的时候; T6 P# p& s- S
,结果就越精确。
) D( q9 M4 C4 Z+ _0 N R 在这里我们要假定豆子都在一个平面上,相互之间没有重叠。* M" _: _# X3 { V
* }: m! V- G$ E* r
蒙特卡罗方法通过抓住事物运动的几何数量和几何特征,利用数学方法来加以模拟,即进行一种数字模
' X1 M1 q! z7 _" y, v- l' L2 H 拟实验。它是以一个概率模型为基础,按照这个模型所描绘的过程,通过模拟实验的结果,作为问题的7 I, J Q. l5 _6 {
近似解。
+ U) V- E" `! L' h; a9 V3 M 9 t3 f7 }, E1 z; I8 ]8 m
蒙特卡罗方法与一般计算方法有很大区别,一般计算方法对于解决多维或因素复杂的问题非常困难,而
: Q# q6 O7 [ ]5 ?- N7 {: i/ g$ f 蒙特卡罗方法对于解决这方面的问题却比较简单。其特点如下: 3 b' ^) L# j X1 @
I、 直接追踪粒子,物理思路清晰,易于理解。
7 x' I. u8 d( C$ ^8 A II、 采用随机抽样的方法,较真切的模拟粒子输运的过程,反映了统计涨落的规律。! R H, c& T" s$ ?/ _) M- W4 d
III、不受系统多维、多因素等复杂性的限制,是解决复杂系统粒子输运问题的好方法。
+ R L" r) {) o( a* }4 } 等等。
7 [- p! S2 S: z1 c5 v$ ?- Q 此算法,日后还会在本BLOG 内详细阐述。' N% L5 e' T5 Z) m! l
& {: V! [9 b3 F) |% } |; f
7 {9 ]+ r2 Y" I4 s' U( } 二、数据拟合、参数估计、插值等数据处理算法8 B' F% L/ ^* n0 e" _" p& N, _" H
我们通常会遇到大量的数据需要处理, 而处理数据的关键就在于这些算法,通常使用Matlab作为工具。
2 w5 }( m. h/ O, u7 K6 Q( i: }; A 数据拟合在数学建模比赛中中有应用,与图形处理有关的问题很多与拟合有关系,一个例子就是98年数% C* S, P8 d9 p4 x
学建模美国赛A题,生物组织切片的三维插值处理,94年A题逢山开路,山体海拔高度的插值计算,还有
* T6 t0 j! S: P0 N& J 吵的沸沸扬扬可能会考的“非典”问题也要用到数据拟合算法,观察数据的走向进行处理。% C& F6 [7 P5 s3 O# [" }
7 R) F B5 C) R, h3 \) [' ~* M
此类问题在 MATLAB 中有很多现成的函数可以调用,熟悉MATLAB,这些方法都能游刃有余的用好。; I6 m4 D% d* Z7 u1 [: P
& q2 s, E; l( _2 f! v
( E* I! A* ~; }3 p# b5 [ 三、线性规划、整数规划、多元规划、二次规划等规划类问题" T; q- F' M* I
数学建模竞赛中很多问题都和数学规划有关,可以说不少的模型都可以归结为一组不等式作为约束条件4 v5 h% }& @& S, m; w
、几个函数表达式作为目标函数的问题,遇到这类问题,求解就是关键了,比如98年B题,用很多不等式
3 ~8 E! R# F1 H, d9 R" ]. r 完全可以把问题刻画清楚,因此列举出规划后用 Lindo 、 Lingo 等软件来进行解决比较方便,所以还( e3 Z( Q) F+ o( C/ I1 |6 S9 Y
需要熟悉这两个软件。
4 t' ^- |( O" t7 n3 o. s: T3 q: S, G # J4 u- G& R- R0 [+ a. s
8 x8 X M- X% E 四、图论算法: Q1 \5 o. G. q3 t
这类问题算法有很多,
' R9 ]6 H/ Y5 \* e1 k; A 包括: Dijkstra 、 Floyd 、 Prim 、 Bellman-Ford ,最大流,二分匹配等问题。
* P. n; C8 f0 |" c# g5 L( ?6 t
7 l. x3 N& p2 k 关于此类图论算法,可参考Introduction to Algorithms--算法导论,关于图算法的第22章-第26章。; L, O8 {* Z n) I
同时,本BLOG内经典算法研究系列,对Dijkstra算法有所简单描述,# v. W i1 G" |9 v
-----------
3 T+ s- U0 `' b 经典算法研究系列:二、Dijkstra 算法初探3 C" _" \ ?4 Q7 S* w+ s6 ?, E
http://blog.csdn.net/v_JULY_v/archive/2010/12/24/6096981.aspx ; [6 g: E' H: \$ K
更多,请关注本BLOG 日后更新的博文。4 T: b8 f0 t+ |4 H
8 \: E9 Q+ @2 }2 U: e5 P1 ]
+ ]. {3 s/ \6 }8 I9 D$ `8 G& a3 T9 I 五、动态规划、回溯搜索、分治算法、分支定界等计算机算法# n+ S7 A" B* T1 k
在数学建模竞赛中,如:92 年B题用分枝定界法, 97年B题是典型的动态规划问题,5 A4 a: Z" x5 O% g% r" Y Q
此外 98 年 B 题体现了分治算法。
0 B6 D3 j( V3 P" W' E* x* @ & u* G1 M0 c2 p+ o
这方面问题和 ACM 程序设计竞赛中的问题类似,8 B% I1 ?9 U! x% q9 Q& F+ \
推荐看一下算法导论,与《计算机算法设计与分析》(电子工业出版社)等与计算机算法有关的书。
4 g& [# U V7 T7 y6 C 1 f2 [, E+ Q3 m+ t/ z, H( q9 ], h
( y, ]; x( v. q8 { 六、最优化理论的三大经典算法:模拟退火法、神经网络、遗传算法 # [* t. s3 y- @: h
这十几年来最优化理论有了飞速发展,模拟退火法、神经网络、遗传算法这三类算法发展很快。
! K5 w7 o0 M" v0 h w 在数学建模竞赛中:比如97年A题的模拟退火算法,00年B题的神经网络分类算法,01年B题这种难题也可
5 J+ @3 l$ u, v, z/ ` 以使用神经网络,还有美国竞赛89年A题也和 BP 算法有关系,当时是86年刚提出BP算法,89年就考了,: W* m: \8 y! \* `
说明赛题可能是当今前沿科技的抽象体现。 $ F2 Y3 d, |0 e+ j9 a
03 年 B 题伽马刀问题也是目前研究的课题,目前算法最佳的是遗传算法。9 D2 z5 u6 f' w/ H4 j& `
7 z7 N+ |2 B: t2 B0 B
另,本人对人工智能非常感兴趣,遗传算法已在本BLOG内有所阐述,敬请参见。
9 d+ Q; a" h \4 {: m- m ----------; O4 V* A/ {& i7 C, k
经典算法研究系列:七、深入浅出遗传算法,透析GA本质6 c. k: U! Y( N( j: b: H# ]
http://blog.csdn.net/v_JULY_v/archive/2011/01/12/6132775.aspx
Q8 u* g2 H2 c3 f
, N5 H; I0 x7 V/ X; L 其它俩大算法,模拟退火法,与神经网络,也定会在本BLOG内日后的博文更新中,详细阐述。
: e- ~, N, [1 f3 z2 e8 o5 t- E4 J9 i # Y0 Y6 K( `* [7 K7 g, c
; h1 P1 M3 {2 f2 F' K, [ 七、网格算法和穷举法
( H% l9 k: b9 _2 N' g 网格算法和穷举法一样,只是网格法是连续问题的穷举。
I8 y; W1 \( z 比如要求在 N 个变量情况下的最优化问题,那么对这些变量可取的空间进行采点,' K1 f: ]9 C, I" t- f+ [
比如在 [ a; b ] 区间内取 M +1 个点,就是 a; a +( b ? a ) =M; a +2 ¢ ( b ? a ) =M ; …;b
( s3 X! F `3 Q2 R) ^4 p) T 那么这样循环就需要进行 ( M + 1) N 次运算,所以计算量很大。
- K! @/ g: i9 q+ V ! r' w/ T# T3 e' _$ j3 h8 }* I
在数学建模竞赛中:比如 97 年 A 题、 99 年 B 题都可以用网格法搜索,这种方法最好在运算速度较6 ] t8 ^3 a: g% s5 Q7 S. C9 I
快的计算机中进行,还有要用高级语言来做,最好不要用 MATLAB 做网格,否则会算很久。- _) u' S2 A8 {* o
穷举法大家都熟悉,自不用多说了。 5 r( c4 S+ |# _& r y
7 D) ]! }3 Y' F2 e) w ' I6 C1 t9 k) l& A7 D
八、一些连续离散化方法3 k5 ]( B8 |! L6 S
大部分物理问题的编程解决,都和这种方法有一定的联系。物理问题是反映我们生活在一个连续的世界
% ~" z: ~/ H/ B7 W 中,计算机只能处理离散的量,所以需要对连续量进行离散处理。
$ P/ g5 f+ e+ r
/ w' v( D) W9 p" w" o+ ]; y$ U* n, T 这种方法应用很广,而且和上面的很多算法有关。
* R0 }- I/ {) {+ p 事实上,网格算法、蒙特卡罗算法、模拟退火都用了这个思想。
) C+ H7 J+ [( z! k, w+ T" @ % o) I( E8 w! u$ } l9 t3 {- k
0 z6 B, L' q, G k) g+ F1 ]( m 九、数值分析算法. E: E* D% C Y& u% a0 E. l2 B
数值分析(numerical analysis),是数学的一个分支,主要研究连续数学(区别于离散数学)问题的9 W; R- k& V l) Z9 l
算法。+ G' S4 _3 i* m( N0 Z9 p) _9 l: C1 x
如果在比赛中采用高级语言进行编程的话,那一些数值分析中常用的算法比 如方程组求解、矩阵运算、& C6 j6 N2 {# M e5 ]0 I. V5 e% d
函数积分等算法就需要额外编写库函数进行调用。( m- e' T& y' ~0 @; R* n
这类算法是针对高级语言而专门设的,如果你用的是 MATLAB 、 Mathematica ,大可不必准备,& w$ h- e" u, i# ~: q9 n
因为像数值分析中有很多函数一般的数学软件是具备的。9 a+ h, `7 X" v {$ t
$ z1 ]& d! N. z! H C# z# z# \, t
8 u- ?# z+ b. ]2 t 十、图象处理算法
- }9 @* Y7 s8 H% Q, p" H4 } 在数学建模竞赛中:比如01 年 A 题中需要你会读 BMP 图象、美国赛 98 年 A 题需要你知道三维插值
) m( q& t8 v6 D& e E 计算, 03 年 B 题要求更高,不但需要编程计算还要进行处理,而数模论文中也有很多图片需要展示,& `( h2 U6 n" Z: ~' r3 x+ o/ m
因此图象处理就是关键。做好这类问题,重要的是把MATLAB 学好,特别是图象处理的部分。9 G9 S1 P$ r) {- `2 Q) [ ^! T6 L
K; R5 Y" P$ @* `
此数学建模十大算法的程序源码打包,请于此处下载:. M5 K2 Q B, r; n
http://download.csdn.net/source/3007336
h H& n0 u: P9 Q( T q# @2 i. d" n8 ~% e0 m9 v1 ^
本人对算法,尤其感兴趣,且日渐愈浓,
7 ]3 J& P+ s5 _7 ]: \* D; J6 u/ h 日后,更多的、好的、经典实用算法将会在本BLOG内有所详细而细致入微的阐述与深入研究。+ |2 ]; m0 B/ O( z- {, j. L) ]
完。
9 R3 U9 q7 v' B 3 R, |0 _; |7 A/ a$ L/ J
( H5 v. b6 h' v$ [; ]- ]- ^
作者声明:
2 S) d7 V7 i$ Y6 l 本人July对本博客所有任何文章、内容和资料享有版权,( T; D- t4 ]5 o1 H* ?) q
转载请注明作者本人July及出处。谢谢。二零一一年一月二十九日。
zan