马尔可夫链和马尔可夫过程有什么区别?
我正在阅读相互矛盾的信息:有时定义是基于状态空间是离散的还是连续的,有时是基于时间是离散的还是连续的。
如果状态空间是离散的,即有限或可数空间是离散的,即是有限或可数的,则马尔可夫过程称为马尔可夫链。
http://www.win.tue.nl/~iadan/que/h3.pdf:
马尔可夫过程是马尔可夫链的连续时间版本。
或者可以将马尔科夫链和马尔科夫过程同义地使用,精确确定时间参数是连续的还是离散的,以及状态空间是连续的还是离散的。
2017-03-04 更新:在https://www.quora.com/Can-I-use-the-words-Markov-process-and-Markov-chain-interchangeably上提出了同样的问题