Markov
-
Markov链的全面解析
一、什么是Markov链 Markov链是一种随机过程,其中未来的状态只依赖于当前状态,而不依赖于过去状态。 在Markov链中,任何状态之间的转移概率只与当前状态有关,与之前的状…
-
Markov Decision Process(马尔科夫决策过程)
一、基础概念 Markov Decision Process(MDP)是以马尔科夫过程为基础,加入决策变量而形成的数学模型。它主要包含以下成分: 状态(State):描述系统当前的…