There are four common Markov models used in different situations, depending on whether every sequential state is observable or not, and whether the system is to be adjusted on the basis of observations made: The simplest Markov model is the Markov chain.
Є чотири загальних моделей Маркова, використовувані в різних ситуаціях, залежно від того, кожен послідовний стан спостерігається чи ні, і чи буде система скорегована на підставі спостережень, зроблених: Найпростіша модель Маркова це ланцюг Маркова.