Markov Process for Stochastic Modeling, 随机过程基础书籍，涵盖 hiddden markov process, point markov process, Markovian arrival Process, Markovian control process etc. 刚开始学习随机过程的人，看这本书容易上手。而且很多前沿的markov decision process的问题基础在于这本书，由本书问题衍生出来的。