我只是希望有人确认我的理解,或者如果我遗漏了什么。
马尔可夫过程的定义表明下一步仅取决于当前状态,而不取决于过去的状态。所以,假设我们有一个 a,b,c,d 的状态空间,我们从 a->b->c->d 开始。这意味着向 d 的过渡只能取决于我们在 c 中的事实。
但是,您真的可以让模型更复杂并“绕过”这个限制吗?换句话说,如果你的状态空间现在是 aa,ab,ac,ad,ba,bb,bc,bd,ca,cb,cc,cd,da,db,dc,dd,这意味着你的新状态空间变成先前状态与当前状态相结合,则上述转换将是 *a->ab->bc->cd ,因此到 cd 的转换(在以前的模型中相当于 d)现在“依赖于”一个状态,如果建模不同,则为先前状态(我在下面将其称为子状态)。
我是否正确,因为可以使其“依赖于先前的状态(子状态)”(我知道从技术上讲它不在新模型中,因为子状态不再是真实状态)通过扩展来保持马尔可夫属性像我一样的状态空间?因此,实际上可以创建一个可能依赖于任意数量的先前子状态的马尔可夫过程。