Markov

  • Markov链的全面解析

    一、什么是Markov链 Markov链是一种随机过程,其中未来的状态只依赖于当前状态,而不依赖于过去状态。 在Markov链中,任何状态之间的转移概率只与当前状态有关,与之前的状…

    编程 2024-11-25
  • Markov Decision Process(马尔科夫决策过程)

    一、基础概念 Markov Decision Process(MDP)是以马尔科夫过程为基础,加入决策变量而形成的数学模型。它主要包含以下成分: 状态(State):描述系统当前的…

    编程 2024-11-07