其实我觉得这个离散的就和连续的定积分是一个道理，只是交换了一下积分的顺序，你写一个二次积分试试就知道了。

像是连续时间马尔可夫的常返性什么的，忘了。

恩，这个式子怎么那么麻烦？老兄你弄错了吧？

不知楼主想要怎样解释！具体含义不是很清楚，但是比较直观的解释是：构造一个两维的下三角矩阵，比如行从1到正无穷，当列下标大于行时元素时为0，其中非零的元素为对应所要求和的项！不知可否？

2楼说得对，是马尔科夫常返得得证明。但是我不明白，上面的式子怎么得到下面的式子？好像用不到高等数学知识，只是自己还想不通！