<p>刚开始学习马尔可夫决策过程，想利用它对复杂系统建模，但想了很久，一直不得其解，在此，向达人请教。<br/>   系统介绍如下：<br/>   系统由N个相互独立项目组成，每个项目满足离散马尔可夫决策过程的各种要素，以系统中的一个项目为例，介绍如下：<br/>   项目k定期进行检查，检查后对其进行状态划分，设可能状态有S个，系统处于状态i时，可采取的维修对策有3种，分别为a1、a2、a3（可以假设每种状态下可能的维修对策集相同），对应的维修费用为c1、c2、c3，相应的转移概率Pij(a1)已知。<br/>   问：由N个与上叙性质类似的项目构成的系统，采用什么维修策略能使总的维修费用最小</p><p>   目前，我所能做到的是：对一个单一项目，采用马尔可夫决策过程进行决策比较容易，但扩展到多个项目构成的系统时，由于通过系统内各个项目状态来描叙系统状态时，系统状态组合数量巨大而难以建立模型。<br/>  为此，向牛人请教了？</p><p>不知道这个主题的求助帖放在这里是否合适，如有不妥，望斑竹见谅！</p><p><a href="http://www.pinggu.org/bbs/thread-372641-1-1.html"></a></p>