数学建模 ————统计问题之预测（一）

杨利霞

数学建模 ————统计问题之预测（一）
    该资料是笔者根据自身理解一点点写出来的，希望各位能尊重这一份来之不易的劳动成果。因个人水平有限，资料中难免会出现不足与错误，欢迎各位的批评指正。(笔者曾获得2015年全国大学生数学建模国家一等奖，2015研究生数学建模竞赛国家二等奖，2016年美国大学生数学建模竞赛M奖）
( Y) ~- x% Y& Z6 U' `. r* s
统计算法总览
, g( E4 o, E$ t1 h) c) K
       统计一词源于国情调查，一般来说包括三个含义：统计工作、统计资料和统计科学。其中统计工作是指的搜集、整理和分析客观事物总体数量方面的资料，统计资料则是由统计工作所获得的各项数字或文字资料，一般反映在图表、分析报告、统计年鉴里面，而统计科学则是指导统计工作的原理、原则和方法。
7 `& c# a, w. [* y. N* s       因此，在数学建模比赛中统计问题一定要有文献资源和数据资源的搜集，并且这一部分内容也要反映在论文中，而整理通常来说是将搜集到的资料以图表的形式呈现在论文中，最后分析自然就是数据预处理和统计算法建模求解。
/ X* ?" s4 o3 b# T8 D4 l1 C
1 Q. P! u2 k9 }# r3 z6 ~7 x1.预测
8 b' [& P  O9 T9 ]6 K
: q7 j/ m8 Q2 D6 I8 P8 G' \; G       预测，顾名思义，即根据先用数据规律推算接下来的数据。而预测按照算法可以分为四大类，一为回归分析，二为概率估计，三为时间序列，四为机器学习。
) ?0 p4 {! K! e% C* P+ K6 _8 y% L
（1）回归分析
$ S& ~6 Y/ m6 R! C5 I( O
       对于回归分析，该类算法适用于求解单一输出的问题，在某种程度上可以叫做函数拟合，即利用一种函数去逼近原有数据 。我们在高中阶段学习的线性回归就属于一种预测方法，下面给出几种函数类型：

- W4 `, @) h) d        多项式拟合：
* V4 p3 U# b9 o2 ]/ ~
        非线性拟合：
) y) z- U- s# @- I7 z
5 P" X, F0 j3 G" k; H  T0 c% p        多元拟合：

       如下图所示，该图像是利用了非线性函数对原有数据进行了逼近，有了函数自然也就可以根据输入计算出接下来的数据，所以回归分析也只适用于单输出问题。而回归分析的关键问题就是对某一函数模型的参数进行求解，matlab中有专门的拟合工具箱polyfit和lsqcurvefit:
---------------


     这里给出matlab两种基础的回归分析代码：
) g& P7 i% k- a5 r
( `$ o6 n) \6 S2 X, x. ~
clc;
clear;
$ u$ G- b. x* iclose all;
%% 线性最小二乘拟合
8 U+ K8 Y& b9 j# q+ c) X" e" ]) Ux = 0 : 0.1 : 1;%输入
y = [-0.447 1.978 3.28 6.16 7.08 7.34 7.66 9.56 9.48 9.30 11.2];%输出
6 m& ^3 ^. P* t( f" z" Y4 F/ ~A = polyfit(x, y, 2);%设定多项式最高次为2，且输入输出长度要一致，并输出多项式系数A
- V5 q" S- l6 U' M* Jz = polyval(A,x);%将多项式系数导入，即得到函数，然后输入数据x，得到输出数据z
figure(1)
plot(x, y, 'k+', x, z, 'r') %将原数据以“黑色十字”散点绘出，然后将函数以红色曲线绘出
! D" Q: ]4 ]2 s2 R1 S9 U9 Jtitle('线性最小二乘拟合');

6 |2 }& S* P8 R6 a1 \. P%% 非线性最小二乘回归
f = inline('a(1)*x+a(2)*x.^2.*exp(-a(3)*x)+a(4)','a','x');%定义一个非线性函数，变量为系数a和自变量x
3 G. g" G+ _  n' Y2 K8 S: `a = lsqcurvefit(f, [1;2;2;2], x, y);%设定系数a的初值为1 2 2 2，然后开始求解；
figure(2)
3 Y+ s1 N+ ]9 oplot(x, y, 'k+', x, f(a,x), 'r') %将原数据以“黑色十字”散点绘出，然后将函数以红色曲线绘出
# ~; m! p5 B) y1 \+ S; Ptitle('非线性最小二乘拟合');
( c2 X/ A$ q. F* [) ^
5 G- g: n9 k3 g# a4 q' z
      效果如下：
* n- s" q9 G# G5 R
（2）概率估计
4 {1 U: X3 V2 k+ n, Q
       而对于概率估计，其中的代表是马尔科夫链算法，即先给数据划分状态，然后将数据的分布规律用状态转移来解释。最后对于当时数据的状态，利用根据状态间的转移概率可以求得未来的状态概率分布，自然也能求得下一状态的预测值。
/ d0 v, V3 {# ^
, A% e8 C/ q4 u! W7 f, U- u       比方说，我只去A,B,C,D四个食堂吃饭，现在告诉你我吃饭的记录，现在就需要计算我在这四个食堂中的转移概率，如我去食堂A吃过后再去四个食堂吃饭的概率是多少？通过这些转移概率不断推算我下一个要去的食堂，再根据四个转移概率得到最大可能去的食堂。但是这只是离散问题的预测，对于连续问题，自然也就需要将连续数据划分为若干个离散的状态，在使用此方法。
; M3 v2 ]1 `0 A, ]5 d* x3 ]9 a  i7 l
      此方法对于初学者来说掌握会比较困难，不过如果能成功使用会为论文添色不少，有兴趣的同学可以自行查找资料了解。（《数学建模算法与应用》一书上有讲解）
1 |' ]% F( z5 Y; [2 w
5 \6 P1 c" J5 R/ Q2 W（3）时间序列

0 @! k* o; H3 c! D( t7 z' o       第三类称其为时间序列，因为输入是按顺序的离散值，大多数情况下就是时间，针对此类问题，由于输入以稳定步长增长的，所以不用考虑输入，直接研究输出的变化规律，这一点类似于高中学的数列，比方说有名的斐波那契数组：1,1,2,3,5...，它的数据特征是f(n+2)=f(n)+f(n+1),现在我们要求后面的数就直接利用该数据特征就行了，当然也可以求出其通项公式，有兴趣的同学可以求着试试。
- z; B/ }8 K4 U4 k1 Z
       而时间序列方面的算法其实就是猜测数据前后存在着什么关系，比如说：一次移动平均算法就是猜测每一个数据 与最近的部分数据的均值存在着某种关系，指数平滑法就是猜测每个数据都跟之前的历史数据的加权平均存在着某种关系。这些算法都可以算作是时间序列算法，不过以上算法都是对数据特征简单的猜测，而对于更复杂的数据特征则可能会用到微分方程，利用微分方程，即可以直接预测，还能用于灰色系统，从而将无规则数据转化为有规律的生成序列。

（4）机器学习
! O' F* p: b# v( H8 V. @9 h9 L
& y4 x0 j$ z% _5 Q# h& \        最后一个就是机器学习，即我们只需要搭好框架，数据特征则会由其自己挖掘，比较有名的有：支持向量机（SVM）、决策树、神经网络（深度学习）。这种算法的最终目的是模拟人脑的结构，它的好处就是在搭建好网络结构之后，通过对已有数据的学习，网络会自行提取数据特征，然后只要我们输入一个数据，网络将自行计算，然后输出它的预测值。这种方法的优点是方便，无需考虑数据规律和数据维度，而缺点则是要求数据量要大，少量样本的训练效果一般不具有适用性。

（5）模型检验

3 x4 f7 q+ K5 Y& y       预测问题中尤其还要注意的是对结果的检验，通常使用残差和后验误差等作为概率统计的检验，也可以用均方误差MSE检验。

, p5 l1 x3 ^& V8 j2 u7 G6 e' S9 z# q       残差值反映了预测值和原始数据的相对差距：

6 ^. r* ~# @3 q# L' @: x% l

       后验误差反映模型的精度：

  ?5 y: N& c5 Z& k' _
6 m; q. ~1 `. d3 B" ?6 j& a% `
. h- M+ |0 P! L+ h

       然后依据下表判断模型精度：

9 [" r! u  X; z9 G/ x
9 w2 @: |0 q3 j" G
      均方误差则是一个简单的误差效果：
, o- R+ M  z/ Z
* ~3 S) ^* E, k) s
5 F! I1 S1 a6 O, V& a* n---------------------

& {+ r! {& X# T: B# F2 F; p

& M9 [3 X8 ]+ o7 L