本书讲述了马尔可夫链模型在排队系统、网页重要性排名、制造系统、再制造系统、库存系统以及金融风险管理等方面的最新应用进展.全书共安排8章内容，第1章介绍马尔可夫链、隐马尔可夫模型和马尔可夫决策过程的基本理论和方法，其余7章分别介绍马尔可夫链模型在不同领域中的应用. 本书可作为自动化、工业工程、统计学、应用数学以及管理学等专业高年级本科生或研究生的专业课教材，也可作为相关领域的研究人员及工程技术人员的参考书.