马氏决策理论与应用第七讲

讲师风采
刘克
中国科学院数学与系统科学研究院应用数学所研究员
讲师简介:
刘克,中国科学院数学与系统科学研究院应用数学所研究员。
视频简介:
马尔可夫是彼得堡数学学派的代表人物,以数论和概率论方面的工作著称。马尔可夫决策过程是基于马尔可夫过程理论的随机动态系统的最优决策过程。马尔可夫决策过程是序贯决策的主要研究领域。它是马尔可夫过程与确定性的动态规划相结合的产物,故又称马尔可夫型随机动态规划,属于运筹学中数学规划的一个分支。马尔可夫决策过程是指决策者周期地或连续地观察具有马尔可夫性的随机动态系统,序贯地作出决策。即根据每个时刻观察到的状……
发布评论
全部评论
段落信息
马氏决策过程的起源可以追述到上个世纪的50年代。1953年Shapley在一次讨论班上做了关于随机对策的报告,所讨论的问题可以看成是一种特殊的马氏决策模型。后来Bellman把Sears邮寄中遇到的问题做了研究,针对这个原始问题,抽象出来的数学模型就是马氏决策过程,相关的理论分析和算法他也写进了自己的博士论文中。

全文文稿

收藏说明: