这里还值得一提的是,本文中使用的方法可以用于处理状态切换过程Y是一个时间非齐次马尔可夫链的情况,其时间依赖生成器由Q(t)=(qij(t))i,j给出∈Z+表示t∈ [0,T]。这里,为t∈ [0,T],qii(T)≤ 0对于i∈ Z+,qij(t)≥ 0表示i 6=j,和p∞对于i,j=1qij(t)=0∈ Z+(即Pj6=iqij(t)=-qii(t)代表i∈ Z+。也适用于i,j∈ Z+,t→ qij(t)在[0,t]上是连续的,且有限和pj∈Z+qij(t)在t中一致收敛∈ [0,T]。感谢:Bo博士获得了gr ANT1471254中国自然科学基金会和QYZDB-SSW-SYS009中国科学院前沿科学重点研究项目的资助。十、 Yu得到了Hong Kong早期职业计划资助人grant 25302116的支持。作者要感谢两位匿名推荐人的仔细阅读和有益的评论,以改进本文的陈述。A辅助L emmasLemma A.1。设函数Φ(x):[0,∞)N+1→ R在x的每个分量中都是凹的。假设存在sx,x*, x个∈ [0, ∞)N+1使x<< x个*<< x、 设{x(n)}n≥1. [0, ∞)N+1满意度X*≤ x(n)表示n≥ 1和limn→∞x(n)=x*. 然后limn→∞Φ(x(n))=Φ(x*).证据由于引理中的给定条件,存在n≥ 1 s uch该x*≤ x(n)≤ x代表所有N≥ n、 对于每个n≥ n、 存在一个向量λ(n)∈ [0,1]N+1满足极限→∞λ(n)=0,使得x(n)k=λ(n)kxk+(1- λ(n)k)x*k或k=1,N+1。因此,可以得出Φ(x(n))=Φλ(n)x+(1- λ(n))x*, λ(n)x+(1- λ(n))x*, . . . , λ(k)N+1xN+1+(1- λ(n)n+1)x*N+1≥λ(n)Φx、 λ(n)x+(1- λ(n))x*, . . . , λ(k)N+1xN+1+(1- λ(n)n+1)x*N+1+ (1 - λ(n))Φx个*, λ(n)x+(1- λ(n))x*, . . . , λ(k)N+1xN+1+(1- λ(n)n+1)x*N+1≥λ(n)λ(n)Φx、 x,λ(n)n+1xN+1+(1- λ(n)n+1)x*N+1+ λ(n)(1- λ(n))Φx、 x个*, . . . , λ(k)N+1xN+1+(1- λ(n)n+1)x*N+1+ (1 - λ(n))λ(n)Φx、 x个*, . . .