更新过程,马尔可夫过程和离散事件模拟过程之间有什么区别?


回答 1:

马尔可夫过程是其中随机变量明天可能取的值取决于该随机变量今天所取的值,但不取决于该随机变量昨天之前所取的任何值。

假设我每天进行一次$ 10的赌博。 每天我要么

  • 将我的财产增加$ 10,概率为0.48,或将我的财产减少$ 10,概率为0.52。

明天赌博之后我的命运只取决于今天赌博之后我有多少钱。 今天前一天我有多少钱都没关系。

更新过程(也称为出生过程)是任何时候总人口规模的理论模型。 出生数是一个随机变量,并且出生可以连续或离散的时间发生。 这是马尔可夫过程的一种。

离散模拟事件过程是对任何过程的模拟(可能是作业问题或作业。在这种情况下,您将模拟马尔可夫过程。)模拟是马尔可夫链可能采取的一种途径。 该模拟可能看起来像下面的8个赌博示例模拟之一。